KR102180826B1 - Data transmitting appratus, data receiving apparatus, data tranceiving system, method for transmitting data and method for receiving data - Google Patents
Data transmitting appratus, data receiving apparatus, data tranceiving system, method for transmitting data and method for receiving data Download PDFInfo
- Publication number
- KR102180826B1 KR102180826B1 KR1020140025653A KR20140025653A KR102180826B1 KR 102180826 B1 KR102180826 B1 KR 102180826B1 KR 1020140025653 A KR1020140025653 A KR 1020140025653A KR 20140025653 A KR20140025653 A KR 20140025653A KR 102180826 B1 KR102180826 B1 KR 102180826B1
- Authority
- KR
- South Korea
- Prior art keywords
- audio
- packet
- field
- data
- sub
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/233—Processing of audio elementary streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/439—Processing of audio elementary streams
- H04N21/4394—Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
- H04N21/2353—Processing of additional data, e.g. scrambling of additional data or processing content descriptors specifically adapted to content descriptors, e.g. coding, compressing or processing of metadata
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/23605—Creation or processing of packetized elementary streams [PES]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/242—Synchronization processes, e.g. processing of PCR [Program Clock References]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4343—Extraction or processing of packetized elementary streams [PES]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
Abstract
데이터 전송 장치를 개시한다. 본 발명의 일 실시 예에 따른 데이터 전송 장치는, 제1 서브 패킷 및 제2 서브 패킷 포함하는 패킷을 생성하는 패킷 생성부와, 상기 생성된 패킷을 데이터 수신 장치로 전송하는 전송부를 포함하고, 상기 제1 서브 패킷 및 상기 제2 서브 패킷은 제1 콘텐츠에 대한 상이한 오디오 데이터를 포함한다.A data transmission device is disclosed. A data transmission apparatus according to an embodiment of the present invention includes a packet generation unit that generates a packet including a first subpacket and a second subpacket, and a transmission unit that transmits the generated packet to a data reception device, and the The first sub-packet and the second sub-packet contain different audio data for the first content.
Description
본 발명은 데이터 송수신 방법 및 장치에 관한 것으로, 좀더 상세하게는, 동일한 콘텐츠에 관한 복수의 오디오 데이터를 송수신하는, 데이터 전송 장치, 데이터 수신 장치, 데이터 송수신 시스템, 데이터 전송 방법 및 데이터 수신 방법에 관한 것이다.The present invention relates to a data transmission/reception method and apparatus, and more particularly, to a data transmission device, a data reception device, a data transmission/reception system, a data transmission method, and a data reception method for transmitting and receiving a plurality of audio data related to the same content. will be.
최근 멀티 미디어 환경이 구축되면서 다양한 데이터 전송을 위한 고속 유선 인터페이스 규격이 제안되고 있다. 예를 들어 HDMI, MHL은 다양한 포맷의 영상 데이터, 오디오 신호, 제어 신호의 전송 규격을 규정한다. Recently, as a multimedia environment has been established, high-speed wired interface standards for various data transmissions have been proposed. For example, HDMI and MHL stipulate transmission standards for video data, audio signals, and control signals in various formats.
그러나, 종래의 오디오 신호 전송 규격은, 시각 장애인을 위한 오디오 데이터나, 콘텐츠에 대한 다국어로 된 오디오 데이터를 전송하는 등의 인터페이스 규격을 제시하지 못하였다. However, the conventional audio signal transmission standard has not proposed an interface standard such as transmitting audio data for the visually impaired or audio data in multiple languages for content.
이처럼, 소스 장치와 싱크 장치 사이에 동일한 콘텐츠와 관련된 복수의 오디오 데이터를 송수신할 수 있는 인터페이스 규격의 필요성이 제기된다.As such, the need for an interface standard capable of transmitting and receiving a plurality of audio data related to the same content between the source device and the sink device is raised.
본 발명은 상술한 필요성에 따라 안출된 것으로, 본 발명의 목적은, 소스 장치와 싱크 장치 사이에 동일한 콘텐츠와 관련된 복수의 오디오 데이터를 송수신할 수 있는 인터페이스 규격을 제공하기 위함이다.The present invention has been devised in accordance with the above-described necessity, and an object of the present invention is to provide an interface standard capable of transmitting and receiving a plurality of audio data related to the same content between a source device and a sink device.
상기와 같은 목적을 달성하기 위한 본 발명의 일 실시 예에 따른, 데이터 전송 장치는, 제1 서브 패킷 및 제2 서브 패킷 포함하는 패킷을 생성하는 패킷 생성부와, 상기 생성된 패킷을 데이터 수신 장치로 전송하는 전송부를 포함하고, 상기 제1 서브 패킷 및 상기 제2 서브 패킷은 제1 콘텐츠에 대한 상이한 오디오 데이터를 포함한다. According to an embodiment of the present invention for achieving the above object, a data transmission device includes a packet generator for generating a packet including a first subpacket and a second subpacket, and a data receiving device for the generated packet. And a transmission unit that transmits to, wherein the first sub-packet and the second sub-packet include different audio data for the first content.
이때, 상기 제1 서브 패킷은 비장애인을 위한 오디오 데이터를 포함하고, 상기 제2 서브 패킷은 시각 장애인을 위한 오디오 데이터를 포함할 수 있다.In this case, the first sub-packet may include audio data for a non-disabled person, and the second sub-packet may include audio data for a visually impaired person.
또한, 상기 제1 서브 패킷 및 상기 제2 서브 패킷은 상이한 언어로 된 오디오 데이터를 포함할 수 있다.In addition, the first sub-packet and the second sub-packet may include audio data in different languages.
또한, 상기 제1 서브 패킷은 상기 제2 서브 패킷에 대한 오디오 디스크립션에 해당하는 오디오 데이터를 포함할 수 있다.Also, the first subpacket may include audio data corresponding to an audio description of the second subpacket.
또한, 상기 패킷은, 상기 제1 콘텐츠와 상이한 제2 콘텐츠에 대한 오디오 데이터를 포함하는 제3 서브 패킷을 더 포함할 수 있다.In addition, the packet may further include a third sub-packet including audio data for second content different from the first content.
이때, 상기 제1 서브 패킷이 포함하는 오디오 데이터는 상기 제1 콘텐츠에 대한 전용 오디오 데이터이고, 상기 제3 서브 패킷이 포함하는 오디오 데이터는 상기 제2 콘텐츠에 대한 전용 오디오 데이터이며, 상기 제2 서브 패킷이 포함하는 오디오 데이터는, 상기 제1 콘텐츠 및 상기 제2 콘텐츠에 대한 공통 오디오 데이터일 수 있다.At this time, the audio data included in the first subpacket is dedicated audio data for the first content, the audio data included in the third subpacket is dedicated audio data for the second content, and the second subpacket The audio data included in the packet may be common audio data for the first content and the second content.
또한, 상기 패킷은, 상기 제2 콘텐츠에 대한 오디오 데이터를 포함하는 제4 서브 패킷을 더 포함하고, 상기 제3 서브 패킷과 상기 제4 서브 패킷은 상이한 오디오 데이터를 포함할 수 있다.Also, the packet may further include a fourth sub-packet including audio data for the second content, and the third sub-packet and the fourth sub-packet may include different audio data.
상기와 같은 목적을 달성하기 위한 본 발명의 일 실시 예에 따른, 데이터 수신 장치는, 데이터 전송 장치로부터 제1 서브 패킷 및 제2 서브 패킷 포함하는 패킷을 수신하는 수신부와, 상기 수신된 제1 서브 패킷 및 상기 제2 서브 패킷을 파싱하는 파싱부를 포함하고, 상기 제1 서브 패킷 및 상기 제2 서브 패킷은 제1 콘텐츠에 대한 상이한 오디오 데이터를 포함한다.According to an embodiment of the present invention for achieving the above object, a data receiving device includes a receiving unit for receiving a packet including a first sub-packet and a second sub-packet from a data transmission device, and the received first sub-packet. And a parsing unit that parses the packet and the second sub-packet, and the first sub-packet and the second sub-packet include different audio data for first content.
또한, 상기 제1 서브 패킷은 비장애인을 위한 오디오 데이터를 포함하고, 상기 제2 서브 패킷은 시각 장애인을 위한 오디오 데이터를 포함할 수 있다.In addition, the first sub-packet may include audio data for a non-disabled person, and the second sub-packet may include audio data for a visually impaired person.
또한, 상기 제1 서브 패킷 및 상기 제2 서브 패킷은 상이한 언어로 된 오디오 데이터를 포함할 수 있다.In addition, the first sub-packet and the second sub-packet may include audio data in different languages.
이때, 상기 제1 서브 패킷은 상기 제2 서브 패킷에 대한 오디오 디스크립션에 해당하는 오디오 데이터를 포함할 수 있다.In this case, the first sub-packet may include audio data corresponding to an audio description of the second sub-packet.
또한, 상기 패킷은, 상기 제1 콘텐츠와 상이한 제2 콘텐츠에 대한 오디오 데이터를 포함하는 제3 서브 패킷을 더 포함할 수 있다.In addition, the packet may further include a third sub-packet including audio data for second content different from the first content.
이때, 상기 제1 서브 패킷이 포함하는 오디오 데이터는 상기 제1 콘텐츠에 대한 전용 오디오 데이터이고, 상기 제3 서브 패킷이 포함하는 오디오 데이터는 상기 제2 콘텐츠에 대한 전용 오디오 데이터이며, 상기 제2 서브 패킷이 포함하는 오디오 데이터는, 상기 제1 콘텐츠 및 상기 제2 콘텐츠에 대한 공통 오디오 데이터일 수 있다.At this time, the audio data included in the first subpacket is dedicated audio data for the first content, the audio data included in the third subpacket is dedicated audio data for the second content, and the second subpacket The audio data included in the packet may be common audio data for the first content and the second content.
또한, 상기 패킷은, 상기 제2 콘텐츠에 대한 오디오 데이터를 포함하는 제4 서브 패킷을 더 포함하고, 상기 제3 서브 패킷과 상기 제4 서브 패킷은 상이한 오디오 데이터를 포함할 수 있다.Also, the packet may further include a fourth sub-packet including audio data for the second content, and the third sub-packet and the fourth sub-packet may include different audio data.
상기와 같은 목적을 달성하기 위한 본 발명의 일 실시 예에 따른, 데이터 송수신 시스템은, 제1 서브 패킷 및 제2 서브 패킷을 포함하는 패킷을 생성하여 데이터 수신 장치로 전송하는 데이터 전송 장치와, 상기 데이터 전송 장치로부터 상기 패킷을 수신하는 데이터 수신 장치를 포함하고, 상기 제1 서브 패킷 및 상기 제2 서브 패킷은 제1 콘텐츠에 대한 상이한 오디오 데이터를 포함한다.According to an embodiment of the present invention for achieving the above object, a data transmission/reception system includes a data transmission device for generating a packet including a first sub-packet and a second sub-packet and transmitting the packet to a data receiving device; and And a data receiving device for receiving the packet from a data transmission device, wherein the first sub-packet and the second sub-packet contain different audio data for first content.
상기와 같은 목적을 달성하기 위한 본 발명의 다른 실시 예에 따른, 데이터 전송 장치는, 오디오 메타 데이터 패킷을 생성하는 패킷 생성부와, 상기 생성된 오디오 메타 데이터 패킷을 데이터 수신 장치로 전송하는 전송부를 포함하고, 상기 생성된 오디오 메타 데이터 패킷의 헤더(header)는, 3D 오디오 샘플 패킷의 전송여부를 나타내는 3D 오디오 필드(3D Audio Field)를 포함한다.According to another embodiment of the present invention for achieving the above object, a data transmission device includes a packet generation unit for generating an audio metadata packet, and a transmission unit for transmitting the generated audio metadata packet to a data receiving device. And the header of the generated audio metadata packet includes a 3D audio field indicating whether or not the 3D audio sample packet is transmitted.
또한, 상기 생성된 오디오 메타 데이터 패킷의 헤더는, 전송되는 오디오 스트림의 개수 정보를 나타내는 오디오 스트림 개수 필드(Number Of Audio Stream Field)를 더 포함할 수 있다.In addition, the header of the generated audio metadata packet may further include a Number Of Audio Stream Field indicating information on the number of transmitted audio streams.
또한, 상기 생성된 오디오 메타 데이터 패킷의 헤더는, 전송되는 상이한 콘텐츠의 개수 정보를 나타내는 뷰 개수 필드(Number Of Views Field)를 더 포함할 수 있다.In addition, the header of the generated audio metadata packet may further include a Number Of Views Field indicating information on the number of different contents to be transmitted.
또한, 상기 생성된 오디오 메타 데이터 패킷의 페이로드(payload)는, 멀티 스트림 오디오 샘플 패킷(Multi-stream Audio Sample Packet) 또는 멀티 스트림 원비트 오디오 샘플 패킷(Multi-stream One Bit Audio Sample Packet)의 서브패킷에 대한 메타 데이터를 나타내는 오디오 메타 데이터 디스크립터 필드를 포함할 수 있다.In addition, the payload of the generated audio meta data packet is a sub of a multi-stream audio sample packet or a multi-stream one bit audio sample packet. It may include an audio metadata descriptor field indicating metadata about a packet.
또한, 상기 오디오 메타 데이터 디스크립터 필드는, 긴급 상황 방송이 있는지를 나타내는 긴급 채널 필드(Emergency Channel Field), 멀티 뷰에서 좌안 또는 우안 영상에 대응되는 오디오 데이터를 포함하는지를 나타내는 멀티뷰 필드(Multivew Field), 오디오 데이터에 대한 언어의 식별 유무를 나타내는 언어 코드 유효 필드(Language Code Valid Field), 보조 오디오 데이터 유무를 나타내는 보조 오디오 유효 필드(Supplemental Audio Valid Field), 메인 오디오 데이터와 상기 보조 오디오 데이터의 프리 믹스 여부를 나타내는 프리믹스 보조 오디오 필드(pre-mixed Supplemental Audio Field), 상기 보조 오디오 데이터의 타입을 나타내는 보조 오디오 타입 필드(Supplemental Audio Type Field), 및 오디오 데이터에 대한 언어 코드를 나타내는 언어 코드 필드(Language Code Field) 중 적어도 하나를 포함할 수 있다.In addition, the audio metadata descriptor field includes an emergency channel field indicating whether there is an emergency broadcast, a multi-view field indicating whether audio data corresponding to a left-eye or right-eye image is included in a multi-view, A language code valid field indicating the presence or absence of a language for audio data, a supplemental audio valid field indicating the presence or absence of auxiliary audio data, whether the main audio data and the auxiliary audio data are premixed A pre-mixed supplemental audio field indicating a pre-mixed supplemental audio field, a supplemental audio type field indicating a type of the auxiliary audio data, and a language code field indicating a language code for audio data. ) May include at least one of.
상기와 같은 목적을 달성하기 위한 본 발명의 다른 실시 예에 따른, 데이터 수신 장치는, 데이터 전송 장치로부터 오디오 메타 데이터 패킷을 수신하는 수신부와, 상기 수신된 오디오 메타 데이터 패킷을 파싱하는 파싱부를 포함하고, 상기 수신된 오디오 메타 데이터 패킷의 헤더(header)는, 3D 오디오 샘플 패킷의 전송여부를 나타내는 3D 오디오 필드(3D Audio Field)를 포함한다. According to another embodiment of the present invention for achieving the above object, a data receiving device includes a receiving unit for receiving an audio meta data packet from a data transmission device, and a parsing unit for parsing the received audio meta data packet, , The header of the received audio metadata packet includes a 3D audio field indicating whether or not the 3D audio sample packet is transmitted.
또한, 상기 오디오 메타 데이터 패킷의 헤더는, 수신되는 오디오 스트림의 개수 정보를 나타내는 오디오 스트림 개수 필드(Number Of Audio Stream Field)를 더 포함할 수 있다. In addition, the header of the audio metadata packet may further include a Number Of Audio Stream Field indicating information on the number of received audio streams.
또한, 상기 오디오 메타 데이터 패킷의 헤더는, 수신되는 상이한 콘텐츠의 개수 정보를 나타내는 뷰 개수 필드(Number Of Views Field)를 더 포함할 수 있다.In addition, the header of the audio metadata packet may further include a Number Of Views Field indicating information on the number of different contents to be received.
또한, 상기 오디오 메타 데이터 패킷의 페이로드(payload)는, 멀티 스트림 오디오 샘플 패킷(Multi-stream Audio Sample Packet) 또는 멀티 스트림 원비트 오디오 샘플 패킷(Multi-stream One Bit Audio Sample Packet)의 서브패킷에 대한 메타 데이터를 나타내는 오디오 메타 데이터 디스크립터 필드를 포함할 수 있다.In addition, the payload of the audio meta data packet is a subpacket of a multi-stream audio sample packet or a multi-stream one bit audio sample packet. It may include an audio meta data descriptor field indicating meta data for the data.
또한, 상기 오디오 메타 데이터 디스크립터 필드는, 긴급 상황 방송이 있는지를 나타내는 긴급 채널 필드(Emergency Channel Field), 멀티 뷰에서 좌안 또는 우안 영상에 대응되는 오디오 데이터를 포함하는지를 나타내는 멀티뷰 필드(Multivew Field), 오디오 데이터에 대한 언어의 식별 유무를 나타내는 언어 코드 유효 필드(Language Code Valid Field), 보조 오디오 데이터 유무를 나타내는 보조 오디오 유효 필드(Supplemental Audio Valid Field), 메인 오디오 데이터와 상기 보조 오디오 데이터의 프리 믹스 여부를 나타내는 프리믹스 보조 오디오 필드(pre-mixed Supplemental Audio Field), 상기 보조 오디오 데이터의 타입을 나타내는 보조 오디오 타입 필드(Supplemental Audio Type Field), 및 오디오 데이터에 대한 언어 코드를 나타내는 언어 코드 필드(Language Code Field) 중 적어도 하나를 포함할 수 있다.In addition, the audio metadata descriptor field includes an emergency channel field indicating whether there is an emergency broadcast, a multi-view field indicating whether audio data corresponding to a left-eye or right-eye image is included in a multi-view, A language code valid field indicating the presence or absence of a language for audio data, a supplemental audio valid field indicating the presence or absence of auxiliary audio data, whether the main audio data and the auxiliary audio data are premixed A pre-mixed supplemental audio field indicating a pre-mixed supplemental audio field, a supplemental audio type field indicating a type of the auxiliary audio data, and a language code field indicating a language code for audio data. ) May include at least one of.
상기와 같은 목적을 달성하기 위한 본 발명의 다른 실시 예에 따른, 데이터 송수신 시스템은, 오디오 메타 데이터 패킷을 생성하여 데이터 수신 장치로 전송하는 데이터 전송 장치와, 상기 데이터 전송 장치로부터 상기 오디오 메타 데이터 패킷을 수신하는 데이터 수신 장치를 포함하고, 상기 오디오 메타 데이터 패킷의 헤더(header)는, 3D 오디오 샘플 패킷의 전송여부를 나타내는 3D 오디오 필드(3D Audio Field)를 포함한다.According to another embodiment of the present invention for achieving the above object, a data transmission/reception system includes a data transmission device that generates an audio metadata packet and transmits it to a data reception device, and the audio metadata packet from the data transmission device. And a data receiving device for receiving, wherein a header of the audio metadata packet includes a 3D audio field indicating whether to transmit a 3D audio sample packet.
상기와 같은 목적을 달성하기 위한 본 발명의 또 다른 실시 예에 따른, 데이터 전송 장치는, 오디오 데이터에 관하여 싱크 장치에 의해 지원되는 특징 정보를 포함하는 디스플레이 식별 정보를 생성하는 생성부와, 데이터 수신 장치에 상기 디스플레이 식별 정보를 전송하는 전송부를 포함하고, 상기 디스플레이 식별 정보는, 상기 싱크 장치가 지원하는 메인 오디오 및 보조 오디오의 특성에 대한 정보를 나타내는 메인/보조 오디오 특성 필드를 포함한다.According to another embodiment of the present invention for achieving the above object, a data transmission device includes a generator for generating display identification information including feature information supported by a sink device for audio data, and data reception. And a transmission unit for transmitting the display identification information to a device, and the display identification information includes a main/secondary audio characteristic field indicating information on characteristics of main audio and auxiliary audio supported by the sink device.
또한, 상기 메인/보조 오디오 특성 필드는, 상기 싱크 장치가 메인 오디오와 보조 오디오의 합성을 지원하는지 나타내는 오디오 믹스 필드(Audio Mix Field), 상기 싱크 장치가 보조 오디오를 지원하는지 나타내는 보조 오디오 지원 필드(Supplemental Audio Support Field), 상기 싱크 장치가 복수의 언어로 된 오디오 데이터를 지원하는지를 나타내는 언어 지원 필드(Language Support Field), 상기 싱크 장치가 멀티뷰 콘텐츠를 위한 멀티 스트림 오디오 데이터를 지원하는지를 나타내는 멀티뷰 오디오 지원 필드(Multiview Audio Support Field), 상기 싱크 장치가 핸들링할 수 있는 최대 오디오 스트림의 개수를 나타내는 최대 스트림 카운트 필드(Maximum Stream Count Field), 및 3D 오디오 디스크립터의 개수를 나타내는 오디오 디스크립터 개수 필드(Number Of Audio Descriptor Field) 중 적어도 하나를 포함할 수 있다.In addition, the main/auxiliary audio characteristic field includes an audio mix field indicating whether the sink device supports synthesis of main audio and auxiliary audio, and an auxiliary audio support field indicating whether the sink device supports auxiliary audio ( Supplemental Audio Support Field), a language support field indicating whether the sink device supports audio data in a plurality of languages, a multi-view audio indicating whether the sink device supports multi-stream audio data for multi-view content A multiview audio support field, a maximum stream count field indicating the number of maximum audio streams that the sink device can handle, and an audio descriptor number field indicating the number of 3D audio descriptors (Number Of Audio Descriptor Field).
또한, 상기 디스플레이 식별 정보는, 상기 싱크 장치가 긴급 상황 방송 수신 및 처리를 지원하는지를 나타내는 긴급 채널 필드(Emergency Channel Field)를 더 포함할 수 있다.In addition, the display identification information may further include an emergency channel field indicating whether the sink device supports emergency broadcast reception and processing.
상기와 같은 목적을 달성하기 위한 본 발명의 또 다른 실시 예에 따른, 데이터 수신 장치는, 데이터 전송 장치로부터, 오디오 데이터에 관하여 싱크 장치에 의해 지원되는 특징 정보를 포함하는 디스플레이 식별 정보를 수신하는 수신부와, 상기 수신된 디스플레이 식별 정보를 분석하는 분석부를 포함하고, 상기 디스플레이 식별 정보는, 상기 싱크 장치가 지원하는 메인 오디오 및 보조 오디오의 특성에 대한 정보를 나타내는 메인/보조 오디오 특성 필드를 포함한다. According to another embodiment of the present invention for achieving the above object, a data reception device includes, from a data transmission device, a reception unit for receiving display identification information including feature information supported by the sink device with respect to audio data. And an analysis unit for analyzing the received display identification information, wherein the display identification information includes a main/secondary audio characteristic field indicating information on characteristics of main audio and auxiliary audio supported by the sink device.
또한, 상기 메인/보조 오디오 특성 필드는, 상기 싱크 장치가 메인 오디오와 보조 오디오의 합성을 지원하는지 나타내는 오디오 믹스 필드(Audio Mix Field), 상기 싱크 장치가 보조 오디오를 지원하는지 나타내는 보조 오디오 지원 필드(Supplemental Audio Support Field), 상기 싱크 장치가 복수의 언어로 된 오디오 데이터를 지원하는지를 나타내는 언어 지원 필드(Language Support Field), 상기 싱크 장치가 멀티뷰 콘텐츠를 위한 멀티 스트림 오디오 데이터를 지원하는지를 나타내는 멀티뷰 오디오 지원 필드(Multiview Audio Support Field), 상기 싱크 장치가 핸들링할 수 있는 최대 오디오 스트림의 개수를 나타내는 최대 스트림 카운트 필드(Maximum Stream Count Field), 및 3D 오디오 디스크립터의 개수를 나타내는 오디오 디스크립터 개수 필드(Number Of Audio Descriptor Field) 중 적어도 하나를 포함할 수 있다.In addition, the main/auxiliary audio characteristic field includes an audio mix field indicating whether the sink device supports synthesis of main audio and auxiliary audio, and an auxiliary audio support field indicating whether the sink device supports auxiliary audio ( Supplemental Audio Support Field), a language support field indicating whether the sink device supports audio data in a plurality of languages, a multi-view audio indicating whether the sink device supports multi-stream audio data for multi-view content A multiview audio support field, a maximum stream count field indicating the number of maximum audio streams that the sink device can handle, and an audio descriptor number field indicating the number of 3D audio descriptors (Number Of Audio Descriptor Field).
또한, 상기 디스플레이 식별 정보는, 상기 싱크 장치가 긴급 상황 방송 수신 및 처리를 지원하는지를 나타내는 긴급 채널 필드(Emergency Channel Field)를 더 포함할 수 있다.In addition, the display identification information may further include an emergency channel field indicating whether the sink device supports emergency broadcast reception and processing.
상기와 같은 목적을 달성하기 위한 본 발명의 또 다른 실시 예에 따른, 데이터 송수신 시스템은, 오디오 데이터에 관하여 싱크 장치에 의해 지원되는 특징 정보를 포함하는 디스플레이 식별 정보를 생성하여 데이터 수신 장치로 전송하는 데이터 전송 장치와, 상기 데이터 전송 장치로부터 상기 디스플레이 식별 정보를 수신하여 분석하는 데이터 수신 장치를 포함하고, 상기 디스플레이 식별 정보는, 상기 싱크 장치가 지원하는 메인 오디오 및 보조 오디오의 특성에 대한 정보를 나타내는 메인/보조 오디오 특성 필드를 포함한다. According to another embodiment of the present invention for achieving the above object, a data transmission/reception system generates display identification information including feature information supported by a sink device for audio data and transmits it to a data receiving device. A data transmission device and a data receiving device that receives and analyzes the display identification information from the data transmission device, wherein the display identification information indicates information on characteristics of main audio and auxiliary audio supported by the sink device. Includes main/secondary audio characteristic fields.
상기와 같은 목적을 달성하기 위한 본 발명의 일 다른 실시 예에 따른, 데이터 전송 방법은, 제1 서브 패킷 및 제2 서브 패킷 포함하는 패킷을 생성하는 단계와, 상기 생성된 패킷을 데이터 수신 장치로 전송하는 단계를 포함하고, 상기 제1 서브 패킷 및 상기 제2 서브 패킷은 제1 콘텐츠에 대한 상이한 오디오 데이터를 포함한다. According to another embodiment of the present invention for achieving the above object, a data transmission method includes generating a packet including a first sub-packet and a second sub-packet, and transmitting the generated packet to a data receiving device. Transmitting, wherein the first sub-packet and the second sub-packet contain different audio data for the first content.
상기와 같은 목적을 달성하기 위한 본 발명의 일 다른 실시 예에 따른, 데이터 수신 방법은, 데이터 전송 장치로부터 제1 서브 패킷 및 제2 서브 패킷 포함하는 패킷을 수신하는 단계와, 상기 수신된 제1 서브 패킷 및 상기 제2 서브 패킷을 파싱하는 단계를 포함하고, 상기 제1 서브 패킷 및 상기 제2 서브 패킷은 제1 콘텐츠에 대한 상이한 오디오 데이터를 포함한다.According to another embodiment of the present invention for achieving the above object, a data receiving method includes receiving a packet including a first subpacket and a second subpacket from a data transmission device, and the received first subpacket. Parsing the sub-packet and the second sub-packet, wherein the first sub-packet and the second sub-packet contain different audio data for a first content.
상기와 같은 목적을 달성하기 위한 본 발명의 다른 실시 예에 따른, 오디오 메타 데이터 패킷을 생성하는 단계와, 상기 생성된 오디오 메타 데이터 패킷을 데이터 수신 장치로 전송하는 단계를 포함하고, 상기 생성된 오디오 메타 데이터 패킷의 헤더(header)는, 3D 오디오 샘플 패킷의 전송여부를 나타내는 3D 오디오 필드(3D Audio Field)를 포함한다.Generating an audio metadata packet according to another embodiment of the present invention for achieving the above object, and transmitting the generated audio metadata packet to a data receiving device, wherein the generated audio The header of the metadata packet includes a 3D audio field indicating whether or not a 3D audio sample packet is transmitted.
상기와 같은 목적을 달성하기 위한 본 발명의 다른 실시 예에 따른, 데이터 수신 방법은, 데이터 전송 장치로부터 오디오 메타 데이터 패킷을 수신하는 단계와, 상기 수신된 오디오 메타 데이터 패킷을 파싱하는 단계를 포함하고, 상기 수신된 오디오 메타 데이터 패킷의 헤더(header)는, 3D 오디오 샘플 패킷의 전송여부를 나타내는 3D 오디오 필드(3D Audio Field)를 포함한다.According to another embodiment of the present invention for achieving the above object, a data receiving method includes receiving an audio metadata packet from a data transmission device and parsing the received audio metadata packet, , The header of the received audio metadata packet includes a 3D audio field indicating whether or not the 3D audio sample packet is transmitted.
상기와 같은 목적을 달성하기 위한 본 발명의 또 다른 실시 예에 따른, 데이터 전송 방법은, 오디오 데이터에 관하여 싱크 장치에 의해 지원되는 특징 정보를 포함하는 디스플레이 식별 정보를 생성하는 단계와, 데이터 수신 장치에 상기 디스플레이 식별 정보를 전송하는 단계를 포함하고, 상기 디스플레이 식별 정보는, 상기 싱크 장치가 지원하는 메인 오디오 및 보조 오디오의 특성에 대한 정보를 나타내는 메인/보조 오디오 특성 필드를 포함한다.According to another embodiment of the present invention for achieving the above object, a data transmission method includes generating display identification information including feature information supported by a sink device with respect to audio data, and a data receiving device And transmitting the display identification information to, wherein the display identification information includes a main/secondary audio characteristic field indicating information on characteristics of main audio and auxiliary audio supported by the sink device.
상기와 같은 목적을 달성하기 위한 본 발명의 또 다른 실시 예에 따른, 데이터 수신 방법은, 데이터 전송 장치로부터, 오디오 데이터에 관하여 싱크 장치에 의해 지원되는 특징 정보를 포함하는 디스플레이 식별 정보를 수신하는 단계와, 상기 수신된 디스플레이 식별 정보를 분석하는 단계를 포함하고, 상기 디스플레이 식별 정보는, 상기 싱크 장치가 지원하는 메인 오디오 및 보조 오디오의 특성에 대한 정보를 나타내는 메인/보조 오디오 특성 필드를 포함한다. According to another embodiment of the present invention for achieving the above object, a data receiving method includes receiving, from a data transmission device, display identification information including feature information supported by a sink device with respect to audio data. And analyzing the received display identification information, wherein the display identification information includes a main/secondary audio characteristic field indicating information on characteristics of main audio and auxiliary audio supported by the sink device.
이상과 같은 본 발명의 다양한 실시 예에 따르면, 본 발명은, 소스 장치와 싱크 장치 사이에 동일한 콘텐츠와 관련된 복수의 오디오 데이터를 송수신할 수 있는 인터페이스 규격을 제공한다.According to various embodiments of the present invention as described above, the present invention provides an interface standard capable of transmitting and receiving a plurality of audio data related to the same content between a source device and a sink device.
도 1은 싱글 오디오 스트림과 멀티 오디오 스트림을 도시한 도면,
도 2는 소스 장치가 싱크 장치로 듀얼 윈도우 및 화면 분리에 대한 멀티 오디오를 전송하는 도시한 도면,
도 3은 상기 화면 분리 지원 정보를 표시하기 위한 싱크 장치와 소스 장치 사이의 데이터 송수신을 개괄적으로 나타낸 도면,
도 4는 상기 멀티 오디오 샘플 패킷의 페이로드가 전송되는 상황을 도시한 도면,
도 5 및 6은 3D 오디오 신호의 전송 타이밍일 도시한 도면,
도 7은 본 발명의 일 실시 예에 따른 데이터 송수신 시스템의 구성을 도시한 블록도,
도 8은 본 발명의 일 실시 예에 따른 데이터 전송 장치의 구성을 도시한 블록도,
도 9는 본 발명의 일 실시 예에 따른 데이터 수신 장치의 구성을 도시한 블록도,
도 10 본 발명의 다른 실시 예에 따른 데이터 송수신 시스템의 구성을 도시한 블록도,
도 11은 본 발명의 다른 실시 예에 따른 데이터 전송 장치의 구성을 도시한 블록도,
도 12는 본 발명의 다른 실시 예에 따른 데이터 수신 장치의 구성을 도시한 블록도,
도 13은 본 발명의 또 다른 실시 예에 따른 데이터 송수신 시스템의 구성을 도시한 블록도,
도 14는 본 발명의 또 다른 실시 예에 따른 데이터 전송 장치의 구성을 도시한 블록도,
도 15는 본 발명의 또 다른 실시 예에 따른 데이터 수신 장치의 구성을 도시한 블록도,
도 16a 내지 16b는 쿼드 뷰 비디오 콘텐츠를 3D 인터레이스 포맷으로 전송하는 경우 다양한 데이터 전송 포맷을 도시한 도면,
도 17은 본 발명의 일 실시 예에 따른 데이터 전송 방법의 흐름도,
도 18은 본 발명의 일 실시 예에 따른 데이터 수신 방법의 흐름도,
도 19는 본 발명의 다른 실시 예에 따른 데이터 전송 방법의 흐름도,
도 20은 본 발명의 다른 실시 예에 따른 데이터 수신 방법의 흐름도,
도 21은 본 발명의 또 다른 실시 예에 따른 데이터 전송 방법의 흐름도, 그리고,
도 22는 본 발명의 또 다른 실시 예에 따른 데이터 수신 방법의 흐름도이다.1 is a diagram showing a single audio stream and a multi audio stream;
FIG. 2 is a diagram illustrating that a source device transmits multiple audio for dual window and screen separation to a sink device;
3 is a diagram schematically showing data transmission/reception between a sink device and a source device for displaying the screen separation support information;
4 is a diagram illustrating a situation in which a payload of the multi-audio sample packet is transmitted;
5 and 6 are diagrams showing transmission timing of 3D audio signals;
7 is a block diagram showing the configuration of a data transmission/reception system according to an embodiment of the present invention;
8 is a block diagram showing the configuration of a data transmission device according to an embodiment of the present invention;
9 is a block diagram showing the configuration of a data receiving apparatus according to an embodiment of the present invention;
10 is a block diagram showing a configuration of a data transmission/reception system according to another embodiment of the present invention;
11 is a block diagram showing a configuration of a data transmission device according to another embodiment of the present invention;
12 is a block diagram showing a configuration of a data receiving apparatus according to another embodiment of the present invention;
13 is a block diagram showing the configuration of a data transmission/reception system according to another embodiment of the present invention;
14 is a block diagram showing the configuration of a data transmission device according to another embodiment of the present invention;
15 is a block diagram showing a configuration of a data receiving apparatus according to another embodiment of the present invention;
16A to 16B are diagrams illustrating various data transmission formats when quad-view video content is transmitted in a 3D interlace format;
17 is a flowchart of a data transmission method according to an embodiment of the present invention;
18 is a flowchart of a data receiving method according to an embodiment of the present invention;
19 is a flowchart of a data transmission method according to another embodiment of the present invention;
20 is a flowchart of a data reception method according to another embodiment of the present invention;
21 is a flowchart of a data transmission method according to another embodiment of the present invention, and,
22 is a flowchart of a data receiving method according to another embodiment of the present invention.
이하 본 발명의 바람직한 실시 예를 첨부된 도면을 참조하여 상세히 설명한다. 본 발명을 설명함에 있어서, 관련된 공지기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단된 경우 그 상세한 설명은 생략한다. 그리고 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다. Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings. In describing the present invention, when it is determined that a detailed description of a related known function or configuration may unnecessarily obscure the subject matter of the present invention, a detailed description thereof will be omitted. In addition, terms to be described later are terms defined in consideration of functions in the present invention, which may vary according to users, operators, or customs. Therefore, the definition should be made based on the contents throughout this specification.
본 발명은 본 발명의 기술적 사상과 균등한 범위에서 HDMI(High Definition Multimedia Interface), MHL(Mobile High-Definition Link) 규격과 같은 다양한 유선 인터페이스 전송 규격에 적용될 수 있으므로 본 발명의 권리범위는 이와 유사한 유선 인터페이스 전송 규격에까지 미친다.Since the present invention can be applied to various wired interface transmission standards such as High Definition Multimedia Interface (HDMI) and Mobile High-Definition Link (MHL) standards within the scope equal to the technical idea of the present invention, the scope of the present invention is It extends to the interface transmission standard.
본 명세서는 하기의 문헌을 참조한다. The present specification refers to the following documents.
ITU-R BS.2159-4 (05/2012), 가정내 다채널 사운드 기술과 방송 애플리케이션(Multichannel sound technology in home and broadcasting applications) ITU-R BS.2159-4 (05/2012), Multichannel sound technology in home and broadcasting applications
SMPTE, SMPTE 2036-2:2008, “UHDTV-음성 특징들과 프로그램 제작을 위한 음성 채널 맵핑(UHDTV ? Audio characteristics and audio channel mapping for program production)”, 2008 SMPTE, SMPTE 2036-2:2008, “UHDTV-Audio characteristics and audio channel mapping for program production”, 2008
IEC, IEC 62574 ed 1.0, “음성, 비디오 그리고 멀티미디어 시스템- 다채널 음성의 일반적 채널 할당(Audio, video and multimedia systems ? General channel assignment of multichannel audio)”, 2011년 4월 7일IEC, IEC 62574 ed 1.0, “Audio, video and multimedia systems-General channel assignment of multichannel audio”, 7 April 2011
다음의 테이블 1은 본 명세서에서 사용하는 용어를 간략하게 설명하고 있다. Table 1 below briefly describes terms used in the present specification.
싱글-AV 스트림에서 스트림 데이터는 하나 또는 그 이상의 비디오 스트림, 그리고 하나 또는 그 이상의 오디오 스트림을 처리할 수 있다.A single stream that is packetized so that all stream data share the same packet stream ID.
In a single-AV stream, the stream data can process one or more video streams and one or more audio streams.
<Table 1 ? Term>
<Table 1? Term>
도 1은 싱글 오디오 스트림과 멀티 오디오 스트림을 도시한 도면이다.1 is a diagram showing a single audio stream and a multi audio stream.
도 1 (A)에 도시된 것처럼 싱글 오디오 스트림은 적어도 하나의 비디오 데이터에 대해 복수의 오디오 데이터가 존재하고, 이들 오디오 데이터가 하나의 싱글 스트림으로 전송되는 경우이다. 싱글 스트림에서는 모든 스트림 데이터가 동일한 패킷 스트림 ID를 공유하도록 패킷화된다. As shown in FIG. 1A, in a single audio stream, a plurality of audio data exists for at least one video data, and these audio data are transmitted as one single stream. In a single stream, all stream data are packetized to share the same packet stream ID.
도 1 (B)에 도시된 것처럼 멀티 오디오 스트림은 다수의 싱글 AV 스트림이 전송되는 경우이다. 멀티 오디오 스트림에서는 유일한 패킷 스트림 ID가 각 싱글 AV 스트림에 할당되는 다수의 싱글-AV 스트림 집합이 존재한다. 다수의 싱글 AV 스트림의 비디오 데이터는 상호 독립적이다.As shown in FIG. 1B, the multi-audio stream is a case in which a plurality of single AV streams are transmitted. In a multi-audio stream, there is a set of multiple single-AV streams in which a unique packet stream ID is assigned to each single AV stream. Video data of a plurality of single AV streams are independent of each other.
멀티 오디오 스트림의 각 오디오 스트림은 최대 2 개의 오디오 채널을 전송한다. 그리고, 싱글 오디오 스트림과 관련된다. 예를 들어, 싱글 뷰 모드에서 각 오디오는 디폴트 비디오 스트림에 연결되고, 듀얼 뷰 모드에서 오디오는 좌측 이미지나 우측 이미지(또는 둘다)에 연결될 수 있다. 또한, 다음과 같은 하나 이상의 보조 오디오 옵션을 전송할 수 있다. 즉, 화면 분리 태깅(Split-screen tagging), 언어 표시(Language indication), 시각/청각 장애인을 위한 오디오 표시(indication of audio for visually/hearing impaired)이 그것이다. Each audio stream of a multi-audio stream carries up to two audio channels. And, it relates to a single audio stream. For example, in single view mode, each audio may be connected to a default video stream, and in dual view mode, audio may be connected to a left image or a right image (or both). In addition, one or more auxiliary audio options as follows may be transmitted. That is, split-screen tagging, language indication, and indication of audio for visually/hearing impaired.
화면 분리(Split Screen)란, 두 개 이상의 윈도우에 대해 소스 장치에 의해 상이한 오디오 데이터가 태깅되고 식별되는 시청 옵션(viewing option)을 의미한다. 화면 분리는 PIP 시청 방식 (picture-in-pucture viewing), 퀵 프리뷰 시청 방식(quick-preview), 멀티 스크린 게임(multi-screen game) 등에서 사용된다. 여기서 윈도우란 싱크 장치의 스크린의 일 영역 상에 디스플레이 되는 구별되는 디스플레이 이미지를 의미한다. Split screen refers to a viewing option in which different audio data is tagged and identified by a source device for two or more windows. Screen separation is used in picture-in-pucture viewing, quick-preview, and multi-screen games. Here, the window means a distinguished display image displayed on an area of the screen of the sink device.
화면 분리(또는 멀티 윈도우도 동일한 용어로 사용될 수 있다)는 멀티 오디오와 함께 사용되는 선택적인 구성이 될 수 있다. 화면 분리 모드는 싱크 장치에서 화면이 분리되는 구성을 나타내며, 오디오 스트림을 태깅하고, 특정한 윈도창에 매핑한다. Split screen (or multi-window can also be used with the same term) can be an optional configuration used with multi-audio. The screen separation mode represents a configuration in which a screen is separated from a sink device, and an audio stream is tagged and mapped to a specific window.
도 2는 소스 장치가 싱크 장치로 듀얼 윈도우 및 화면 분리에 대한 멀티 오디오를 전송하는 도시한 도면이다.FIG. 2 is a diagram illustrating that a source device transmits multiple audio for dual window and screen separation to a sink device.
도 2의 (A)는 멀티 스크린에 각각에 대한 오디오 데이터를 전송하는 실시 예이고, 도 2의 (B)는 퀵 프리뷰 시청이나 PIP 시청에 따른 복수의 오디오 데이터를 전송하는 실시 예이며, 도 2의 (C)는 멀티 스크린 게임에 따른 복수의 오디오 데이터를 전송하는 실시 예를 도시한다. 싱크 장치의 사용자는 원하는 오디오를 선택하여 청취할 수 있다. FIG. 2A is an embodiment of transmitting audio data for each of a multi-screen, and FIG. 2B is an embodiment of transmitting a plurality of audio data according to a quick preview or PIP viewing, and FIG. 2 (C) shows an embodiment of transmitting a plurality of audio data according to a multi-screen game. The user of the sink device can select and listen to desired audio.
도 3은 상기 화면 분리 지원 정보를 표시하기 위한 싱크 장치와 소스 장치 사이의 데이터 송수신을 개괄적으로 나타낸 도면이다.3 is a diagram schematically illustrating data transmission and reception between a sink device and a source device for displaying the screen separation support information.
소스 장치(310)는 밴더-특정 인포프레임(Vendor-Specific Infoframe), 멀티 오디오 샘플 패킷(Multi-Audio Sample Packet), 멀티 오디오 매타 데이터 패킷(Multi-Audio Metadata Packet)을 싱크 장치로 전송한다. The
멀티 오디오 샘플 패킷은 복수의 오디오 스트림을 포함한다. 멀티 오디오 메타 데이터 패킷은 각 오디오 스트림에 대한 설정을 표시한다. 이는 비디오 스트림과 관련되며, 보조 오디오 정보를 운반할 수 있다. 밴더-특정 인포 프레임은 전송되는 콘텐츠의 멀티 뷰 타입을 표시한다. 구체적인 실시 예에 대해서는 후술하기로 한다. The multi-audio sample packet includes a plurality of audio streams. The multi-audio metadata packet indicates the settings for each audio stream. It is related to the video stream and may carry auxiliary audio information. The vendor-specific info frame indicates the multi-view type of the transmitted content. A specific embodiment will be described later.
싱크 장치(320)는 확장된 디바이스 성능 레지스터(Extended Device Capability Register)를 소스 장치로 전송하여 싱크 장치가 지원하는 멀티 오디오 모드 정보를 알려준다. 구체적인 실시 예에 대해서는 후술하기로 한다.
The
한편, 멀티 오디오는 보조 오디오 트랙들(예를 들면, 다수 언어, 시각적 장애를 위한 오디오 설명, 또는 청각적 장애를 위한 클린 오디오)의 전송을 지원한다. 이 경우에, 최대 16개의 오디오 스트림들이 동시에 전송될 수 있다. 이에 대해서도 구체적인 설명은 뒤에서 하기로 한다.
Meanwhile, the multi-audio supports transmission of auxiliary audio tracks (eg, multiple languages, audio description for visual impairment, or clean audio for hearing impairment). In this case, up to 16 audio streams can be transmitted simultaneously. A detailed description of this will be given later.
TMDS 시그널링과 인코딩TMDS signaling and encoding
데이터 플랫폼 패킷Data platform packet
< Table 2 - Packet Types><Table 2-Packet Types>
3D 오디오 샘플 패킷3D audio sample packet
3D 오디오는 스피커가 3D 공간상에서 3D 오디오 규격(e.g. 10.2ch, 22.2ch, 30.2ch 등)별로 정해진 위치에 배치될 수 있는 오디오로 정의된다. 3D 오디오 샘플 패킷은 9개에서 32개의 오디오 채널들을 가지는 하나의 오디오 샘플로 구성되어 있다.3D audio is defined as audio in which a speaker can be placed in a position determined by 3D audio standards (e.g. 10.2ch, 22.2ch, 30.2ch, etc.) in 3D space. The 3D audio sample packet is composed of one audio sample having 9 to 32 audio channels.
3D 오디오 스트림은 32 오디오 채널(또는 그 이상)까지를 포함하고 데이터 섬 구간에서 연속적인 패킷을 통해 전송된다. 각 패킷은 8 오디오 채널들까지 포함한다. 서브 패킷들의 구성은 시퀀스 번호와 헤더에 있는 샘플 프레즌트 비트(sample_present bits)에 의해 판단된다. The 3D audio stream includes up to 32 audio channels (or more) and is transmitted through consecutive packets in the data island section. Each packet contains up to 8 audio channels. The configuration of the sub-packets is determined by the sequence number and the sample present bits in the header.
시퀀스 번호 필드(sequence_number): 현재 패킷의 순서를 나타낸다. 다수 3D 오디오 샘플 패킷들이 싱글 3D 오디오 샘플을 포함하기 때문에, 이 필드는 패킷 순서를 정확하게 식별하기 위해 필요하다. Sequence number field (sequence_number): indicates the order of the current packet. Since multiple 3D audio sample packets contain a single 3D audio sample, this field is needed to accurately identify the packet order.
다른 헤더 필드들과 서브패킷 구조는 MHL 2.0 명세서에서 보여지는 오디오 샘플 패킷과 일치한다.Other header fields and subpacket structure are consistent with the audio sample packet shown in the MHL 2.0 specification.
< Table 3 - 3D Audio Sample Packet>
<Table 3-3D Audio Sample Packet>
멀티 오디오 샘플 패킷Multi Audio Sample Packet
멀티 오디오 샘플 패킷은 각 오디오 샘플이 독립적으로 오디오 스트림과 관련된 네 개의 오디오 샘플들을 포함할 수 있다. 소스 장치가 네 개 이상의 독립적 오디오 스트림들을 동시에 전송할 때, 이런 연속적인 오디오 스트림들은 계속되는 멀티 오디오 샘플 패킷들 시리즈에 의해 전송된다. 패킷 헤더에서 정의된 시퀀스 번호(sequence_number)는 각각의 멀티 오디오 샘플 패킷을 식별하고 패킷들의 정렬 내에서 현재 패킷의 순서를 나타낸다. 서브 패킷들의 구성은 시퀀스 번호와 헤더에 있는 샘플 프레즌트 비트(sample present bits) 에 의해 판단된다. 이에 대해 멀티 오디오 데이터 패킷화에서 자세하게 설명된다. The multi-audio sample packet may include four audio samples, each audio sample independently associated with an audio stream. When the source device transmits four or more independent audio streams simultaneously, these consecutive audio streams are transmitted by a series of consecutive multi-audio sample packets. The sequence number (sequence_number) defined in the packet header identifies each multi-audio sample packet and indicates the order of the current packet within the arrangement of packets. The configuration of the sub-packets is determined by the sequence number and sample present bits in the header. This will be described in detail in multi-audio data packetization.
각각의 서브 패킷(또는 오디오 스트림)을 위해, 멀티 오디오 메타데이터 패킷(Multi-Audio Metadata Packet)에 있는 디스크립터 필드(descriptor field)는 뷰 모드(즉, 싱글-뷰 또는 멀티-뷰), 그리고 선택적 정보(예를 들면, 화면 분리 태깅, 언어 코드, 시각적 장애를 위한 오디오, 등)를 설명한다. 이것들은 뒤에서 자세히 설명된다.For each sub-packet (or audio stream), the descriptor field in the Multi-Audio Metadata Packet is a view mode (i.e., single-view or multi-view), and optional information. (For example, screen separation tagging, language code, audio for visual impairment, etc.) These are described in detail later.
시퀀스 번호 필드(sequence_number): 소스 장치로부터 싱크 장치로 전송하기 위한 네 개 이상의 오디오 스트림들이 있을 때, 현재 멀티 오디오 샘플 패킷의 시퀀스 번호를 나타낸다. 만약 이 필드가 0으로 설정되면, 그 패킷은 해당 서브 패킷들에서 각각 첫 번째 네 개의 오디오 스트림들을 포함할 수 있다. 만약 이 필드가 1로 설정되면, 그 패킷은 해당 서브 패킷들에서 각각 두 번째 네 개의 오디오 스트림 세트를 포함할 수 있다. 비슷한 방법에서, 패킷은 이 필드가 2나 3으로 설정될 때, 세 번째나 네 번째 네 개의 오디오 스트림 세트를 각각 포함한다. 시퀀스 번호가 0인 서브 패킷 0에서 처리되는 오디오 스트림은 디폴트(default) 오디오 스트림으로서 지정된다. Sequence number field (sequence_number): When there are four or more audio streams for transmission from the source device to the sink device, this indicates the sequence number of the current multi-audio sample packet. If this field is set to 0, the packet may include the first four audio streams in each of the subpackets. If this field is set to 1, the packet may include a second set of four audio streams, respectively, in the subpackets. In a similar way, a packet contains a third or fourth set of four audio streams, respectively, when this field is set to 2 or 3. An audio stream processed in
스트림 프레즌트 필드 (stream_presnt.spX) : 서브 패킷 X가 스트림 X의 오디오 샘플(들)을 포함하는지 아닌지를 나타낸다. Stream present field (stream_presnt.spX): Indicates whether sub-packet X includes audio sample(s) of stream X.
스트림 플랫 필드(stream_flat.spX) : 서브 패킷 X가 스트림 X의 “플랫라인(flatline)” 샘플을 나타내는지 아닌지를 나타낸다. stream_present.spX 가 설정될 때만 유효하다. Stream flat field (stream_flat.spX): Indicates whether or not subpacket X represents a “flatline” sample of stream X. It is valid only when stream_present.spX is set.
다른 헤더 필드들과 서브 패킷 구조는 MHL 2.0 스팩에서 보여지는 오디오 샘플 패킷과 일치한다. The other header fields and subpacket structure correspond to the audio sample packet shown in the MHL 2.0 specification.
< Table 4 - Mutli Audio Sample Packet><Table 4-Mutli Audio Sample Packet>
도 4는 상기 멀티 오디오 샘플 패킷의 페이로드가 전송되는 상황을 도시한 도면이다. 4 is a diagram illustrating a situation in which the payload of the multi-audio sample packet is transmitted.
도 4에 도시된 것처럼 4 개의 멀티 오디오 샘플 패킷이 전송되는 경우 16개의 오디오 스트림을 운반할 수 있다. 시퀀스 번호는 2비트로 이루어져 있으므로, 최대 16개의 오디오 스트림이 운반될 수 있다.
As shown in FIG. 4, when four multi-audio sample packets are transmitted, 16 audio streams may be carried. Since the sequence number consists of 2 bits, up to 16 audio streams can be carried.
3D 오디오 메타데이터 패킷3D audio metadata packet
액티브(active) 3D 오디오 데이터를 설명하는 보조 데이터(Ancillary data)는 3D 오디오 메타데이터 패킷을 사용해서 전송된다. 소스 장치가 3D 오디오 샘플 패킷들을 전송할 수 있다면, 소스 장치는 항상 정확한 3D 오디오 메타데이터 패킷을, 적어도 두 개의 비디오 필드당 한번, 전송한다. Ancillary data describing active 3D audio data is transmitted using a 3D audio metadata packet. If the source device can transmit 3D audio sample packets, the source device always transmits the correct 3D audio metadata packet, at least once per two video fields.
다음은 3D 오디오 메타데이터 패킷을 보여준다. The following shows the 3D audio metadata packet.
Reserved
Reserved
< Table 5 - 3D Audio Metadata Packet><Table 5-3D Audio Metadata Packet>
< Table 6 - 3D_CC (3D Audio Channel Count) field><Table 6-3D_CC (3D Audio Channel Count) field>
Based on ITU-R BS. 2159-4 (Type B, 10.2ch)Up to 10.2 channels
Based on ITU-R BS. 2159-4 (Type B, 10.2ch)
Based on SMPTE 2036-2Up to 22.2 channels
Based on SMPTE 2036-2
Based on IEC 62574/Ed.1Up to 30.2 channels
Based on IEC 62574/Ed.1
< Table 7 - 3D_CAST (3D Audio Channel Allocation Standard Type) field><Table 7-3D_CAST (3D Audio Channel Allocation Standard Type) field>
(hex)3D_CA
(hex)
< Table 8 - 3D_CA (3D Audio Channel/Speaker Allocation) field ( 3D_CAST = 0x01(up to 10.2ch) )><Table 8-3D_CA (3D Audio Channel/Speaker Allocation) field (3D_CAST = 0x01(up to 10.2ch) )>
(hex)3D_CA
(hex)
(hex)3D_CA
(hex)
< Table 9 - 3D_CA (3D Audio Channel/Speaker Allocation) field ( 3D_CAST = 0x02(up to 22.2ch) )><Table 9-3D_CA (3D Audio Channel/Speaker Allocation) field (3D_CAST = 0x02(up to 22.2ch) )>
(hex)3D_CA
(hex)
(hex)3D_CA
(hex)
(hex)3D_CA
(hex)
< Table 10 - 3D_CA (3D Audio Channel/Speaker Allocation) field ( 3D_CAST = 0x03(up to 30.2ch) )>
<Table 10-3D_CA (3D Audio Channel/Speaker Allocation) field (3D_CAST = 0x03(up to 30.2ch) )>
멀티 오디오 메타데이터 패킷(Multi-Audio Metadata Packet)Multi-Audio Metadata Packet
액티브 멀티 오디오 스트림을 설명하는 보조 데이터(supplementary data)는 멀티 오디오 메타데이터 패킷을 사용해서 전송된다. 이 패킷은 뷰 종류와 멀티 오디오 샘플 패킷들에서 옮겨지는 각각의 오디오 스트림을 위한 보조적 오디오 선택사항들을 설명하기 위해 사용된다. Supplementary data describing the active multi-audio stream is transmitted using multi-audio metadata packets. This packet is used to describe the view type and auxiliary audio options for each audio stream carried in the multi-audio sample packets.
소스 장치가 멀티 오디오 샘플 패킷들을 전송할 수 있다면, 소스 장치는 항상 정확한 멀티 스트림 오디오 메타데이터 패킷을, 적어도 두 개의 비디오 필드당 한번씩 전송한다. If the source device can transmit multi-audio sample packets, the source device always transmits the correct multi-stream audio metadata packet once per at least two video fields.
다음은 멀티 오디오 메타데이터 패킷을 보여준다.The following shows the multi-audio metadata packet.
ValidSC_
Valid
(or Split_Screen_Config, if SC_Valid=1)000 0000
(or Split_Screen_Config, if SC_Valid=1)
< Table 11 - Multi-Audio Metadata Packet>
<Table 11-Multi-Audio Metadata Packet>
뷰 종류 필드(MA_View_Type): 싱글뷰나 멀티뷰 같은 멀티 오디오 스트림의 관련된 뷰 모드를 나타낸다. 아래 테이블을 참고.View type field (MA_View_Type): Represents a related view mode of a multi-audio stream such as single view or multi view. See table below.
시퀀스 번호 필드(Sequence_Number): 패킷이나 현재 멀티 오디오 메타데이터 패킷의 시퀀스 번호를 나타낸다. 이 필드는 최고 네 개의 상이한 멀티 오디오 메타데이터 패킷들을 식별하기 위해 사용된다. 이 필드는 각 멀티 오디오 메타데이터 패킷을 같은 시퀀스 번호를 갖는 멀티 오디오 샘플 패킷과 연결한다. Sequence number field (Sequence_Number): indicates the sequence number of a packet or a current multi-audio metadata packet. This field is used to identify up to four different multi-audio metadata packets. This field associates each multi-audio metadata packet with multi-audio sample packets having the same sequence number.
오디오 스트림 개수 필드(Num_Audio_Streams: 멀티 오디오 샘플 패킷들에 의해 전송된 오디오 스트림들의 총 개수를 나타낸다.The number of audio streams field (Num_Audio_Streams: represents the total number of audio streams transmitted by multi-audio sample packets).
화면 분리 유효 필드(SC_Valid): 만약 1로 설정된다면, 화면 분리 태깅은 지원받고, 화면 분리 구성 필드는 다음 7비트에서 상세화된다. 만약 0으로 설정되면, 화면 분리 태깅은 지원받지 않거나 상세화되지 않거나 하고, 다음 7비트는 다른 사용을 위해 남겨진다. Screen Split Valid Field (SC_Valid): If set to 1, screen split tagging is supported, and the screen split configuration field is detailed in the next 7 bits. If set to 0, screen split tagging is either not supported or detailed, and the next 7 bits are reserved for other use.
화면 분리 종류 필드(Split_Screen_Config) : 현재 디스크립터에 의해 나타내지는 오디오 스트림과 관련된 화면 분리 종류를 나타낸다. 선택 가능한 화면 분리 종류들은 아래 테이블 13에서 나열되어 있다. 이 필드는 SC_유효=1일때만 유효하다.Screen split type field (Split_Screen_Config): indicates the screen split type related to the audio stream indicated by the current descriptor. Selectable screen separation types are listed in Table 13 below. This field is valid only when SC_valid=1.
멀티 오디오 디스크립터 필드(MA_Descriptor_X): 해당 멀티 오디오 샘플 패킷의 서브 패킷 X에 의해 전송되는 오디오 스트림의 특성을 나타낸다. 테이블 13은 멀티 오디오 디스크립터의 상세한 구조를 보여준다. Multi-audio descriptor field (MA_Descriptor_X): This indicates the characteristics of the audio stream transmitted by the sub-packet X of the multi-audio sample packet. Table 13 shows the detailed structure of the multi-audio descriptor.
< Table 12 - Multi-Audio Type field><Table 12-Multi-Audio Type field>
Split mode 1 (split by 2)
Split mode 2 (split by 2)
Split mode 3 (split by 2)
Split mode 4 (split by 3)
Split mode 5 (split by 3)
Split mode 6 (split by 3)
Split mode 7 (split by 3)
Split mode 8 (split by 3)
Split mode 9 (split by 3)
Split mode 10 (split by 4)
Split mode 11 (split by 4)
< Table 13 - Split_Screen_Config field>
<Table 13-Split_Screen_Config field>
다음 표는 멀티 오디오 디스크립터를 보여준다.The following table shows the multi-audio descriptor.
Language_Code (3 Bytes)
Language_Code (3 Bytes)
< Table 14 - Multi-Audio Descriptor>
<Table 14-Multi-Audio Descriptor>
화면 분리 태그 필드(Split_Screen_Tag) : 현재 멀티 오디오 디스크립터에 의해 나타내지는 오디오 스트림과 관련된 특정 창(분리 화면 구성에 의해 정의된 것처럼)을 나타낸다. 상세한 설명은 아래 테이블 16에서 보여진다. 이 필드는 SC_유효=1 일때만 유효하고, 그렇지 않으면 싱크 장치는 이 필드를 무시한다. Split screen tag field (Split_Screen_Tag): represents a specific window (as defined by the split screen composition) related to the audio stream represented by the current multi-audio descriptor. A detailed description is shown in Table 16 below. This field is valid only when SC_valid = 1, otherwise the sink device ignores this field.
관련 뷰 식별 필드(Associated_View_ID): 현재 멀티 오디오 디스크립터에 의해 나타내지는 오디오 스트림과 관련된 특정 뷰를 나타낸다. 이 필드의 의미는 뷰 종류 필드(MA_View_Type) 의 값에 달려있다. 상세한 설명은 아래 테이블 15에서 보여진다. Related view identification field (Associated_View_ID): indicates a specific view related to an audio stream represented by the current multi-audio descriptor. The meaning of this field depends on the value of the view type field (MA_View_Type). A detailed description is shown in Table 15 below.
유효 언어 코드 필드(LC_present): 만약 이 필드가 1로 설정되면, 현재 디스크립터는 다음 바이트들에서 유효한 언어 코드 필드(Language_Code)를 포함한다. Valid language code field (LC_present): If this field is set to 1, the current descriptor includes a valid language code field (Language_Code) in next bytes.
믹스 오디오 필드(Mixed_Audio): 만약 이 필드가 1로 설정되면, 해당 오디오 스트림은 보조 오디오 종류 필드(Suppl_Audio_Type)에 의해 나타나듯이 일반 오디오와 보조 오디오의 미리 믹스된 스트림을 포함한다. Mixed Audio Field (Mixed_Audio): If this field is set to 1, the corresponding audio stream includes a premixed stream of normal audio and auxiliary audio as indicated by the auxiliary audio type field (Suppl_Audio_Type).
SAT 프레즌트 필드(SAT_present) : 만약 이 필드가 1로 설정되면, 현재 디스크립터는 다음 4비트들에서 유효한 보조 오디오 종류 필드(Suppl_Audio_Type)를 포함한다. SAT present field (SAT_present): If this field is set to 1, the current descriptor includes an auxiliary audio type field (Suppl_Audio_Type) valid in the following 4 bits.
보조 오디오 종류 필드(Suppl_Audio_Type) : 해당 오디오 스트림을 위한 보조 오디오의 종류를 나타낸다. 상세한 설명은 테이블 17을 참고. 이 필드는 SAT 프레즌트 필드(SAT_present)=1 일 때만 유효하고, 그렇지 않으면, 싱크 장치는 이 필드를 무시한다. Auxiliary audio type field (Suppl_Audio_Type): indicates the type of auxiliary audio for a corresponding audio stream. See Table 17 for details. This field is valid only when the SAT present field (SAT_present) = 1, otherwise, the sink device ignores this field.
언어 코드 필드(Language_Code): 해당 오디오 스트림의 ISO639로 정의된 언어 코드를 나타낸다. 이 필드는 유효 언어 코드 필드(LC_present)가 1로 설정될 때만 유효하고, 그렇지 않으면, 싱크 장치는 이 필드를 무시한다.Language code field (Language_Code): Represents a language code defined as ISO639 of a corresponding audio stream. This field is valid only when the valid language code field LC_present is set to 1, otherwise, the sink device ignores this field.
< Table 15 - Associated View Identifier field><Table 15-Associated View Identifier field>
< Table 16 - Split-Screen Tag field><Table 16-Split-Screen Tag field>
< Table 17 - Supplementary Audio Feature field>
<Table 17-Supplementary Audio Feature field>
액티브 멀티 오디오 모드 인디케이터(Active Multi-Audio Mode Indicator)Active Multi-Audio Mode Indicator
소스 장치는 싱크 장치에, 전송되는 정확한 뷰 모드를 나타내기 위해 Vendor-Specific Infoframe(VSIF)를 사용한다. VSIF는 테이블 18에서 보여지는 것처럼 구조화된다. The source device uses a Vendor-Specific Infoframe (VSIF) to indicate the correct view mode to be transmitted to the sink device. VSIF is structured as shown in Table 18.
0x7CA61D24-bit IEEE-assigned Organizationally Unique Identifier (OUI)
0x7CA61D
< Table 18 - Vendor-Specific InfoFrame Packet>
<Table 18-Vendor-Specific InfoFrame Packet>
MHL 멀티 뷰 필드(MHL_MULTI_VIEW): 어떤 멀티뷰 모드가 전송되는지를 나타낸다. 상세한 설명은 테이블 19에서 보여진다. MHL multi-view field (MHL_MULTI_VIEW): This indicates which multi-view mode is transmitted. A detailed description is shown in Table 19.
< Table 19 - MHL_MULTI_VIEW field>
<Table 19-MHL_MULTI_VIEW field>
비디오video
3D 지원을 위한 3D 비디오 디스크립터3D video descriptor for 3D support
SUPPSUPP
SUPPLR_
SUPP
SUPPTB_
SUPP
SUPPFS_
SUPP
< Table 20 - 3D Video Descriptor Data Structure>
<Table 20-3D Video Descriptor Data Structure>
각각의 지원되는 3D 비디오 모드는 하나의 3D 비디오 디스크립터에서 나타내진다. Each supported 3D video mode is indicated in one 3D video descriptor.
MV_SUPP: 만약 ‘1’로 설정되면, 장치는 멀티뷰 비디오 스트리밍을 위한 3D 비디오 포맷들을 사용해 지원한다.
MV_SUPP: If set to '1', the device supports using 3D video formats for multi-view video streaming.
오디오audio
채널/스피커 할당Channel/speaker assignment
싱크 장치가 3D 오디오를 수신할 능력이 있을 경우에, 테이블 38에서 테이블 40에 설명된 3D 채널 스피커 할당 디스크립터는 부착된 스피커들의 구성을 나타내기 위해 사용된다. 소스 장치로부터 전송되는 3D 오디오를 위한 현재 스피커 할당의 지표가 3D 오디오 메타데이터 패킷의 3D CA 필드에서 다뤄진다. 3D CA 필드의 상세한 설명은 테이블 27부터 29를 참고한다.
When the sink device is capable of receiving 3D audio, the 3D channel speaker assignment descriptor described in Table 40 in Table 38 is used to indicate the configuration of the attached speakers. The indicator of the current speaker allocation for 3D audio transmitted from the source device is handled in the 3D CA field of the 3D audio metadata packet. For a detailed description of the 3D CA field, refer to Tables 27 to 29.
3D 오디오 데이터 패킷화(3D Audio Data Packetization)3D Audio Data Packetization
3D 오디오 샘플 패킷의 각 서브 패킷은 0 또는 하나의 IEC 60958 프레임을 포함한다. 만약 소스 장치가 3D 오디오 스트림을 다운 믹스할 필요가 있고, 그 다운 믹스된 오디오 스트림들이 또한 3D 오디오 스트림일 때, 그것들은 3D 오디오 샘플 패킷들을 사용해서 처리된다. 만약 싱크 장치가 3D 오디오 특징을 지원하지 않는다면, 소스 장치는 3D 오디오 메타데이터 패킷과 더불어 3D 오디오 샘플 패킷들을 전송하지 않는다. Each subpacket of the 3D audio sample packet contains zero or one IEC 60958 frame. If the source device needs to downmix a 3D audio stream, and the downmixed audio streams are also 3D audio streams, they are processed using 3D audio sample packets. If the sink device does not support the 3D audio feature, the source device does not transmit 3D audio sample packets along with the 3D audio metadata packet.
채널들의 수에 의존해, 다른 서브 패킷 레이아웃의 수가 존재한다. 아래 테이블 21부터 23는 12, 24, 또는 32 채널들 각각을 전송할 때 3D 오디오 패킷 레이아웃을 보여준다.Depending on the number of channels, there are different number of sub packet layouts. Tables 21 to 23 below show the 3D audio packet layout when transmitting each of 12, 24, or 32 channels.
< Table 21 - 3D Audio Sample Packet Layout for 12 channels><Table 21-3D Audio Sample Packet Layout for 12 channels>
< Table 22 - 3D Audio Sample Packet Layout for 24 channels><Table 22-3D Audio Sample Packet Layout for 24 channels>
(Max)32
(Max)
< Table 23 - 3D Audio Sample Packet Layout for 32 channels>
<Table 23-3D Audio Sample Packet Layout for 32 channels>
각각의 서브 패킷을 위한 하나의, 3D 오디오 샘플 패킷 헤더에 4개의 샘플 프레즌트 비트(Sample_present bit)들이 있다. 각각은 하나의 서브 패킷이 3D 오디오 샘플을 포함한다는 것을 나타낸다. 덧붙여, 샘플에 의해 대표되는 시간 기간 동안에 소스 장치에서 이용 가능한 유용한 오디오 데이터가 없다면, 설정되는 네 개의 샘플 플랫(sample_flat.spX) 비트들이 있다. 이것은 샘플 비율 변화 또는 일시적인 스트림 방해 동안 발생할 수 있다. There are four sample present bits (Sample_present bits) in one, 3D audio sample packet header for each sub packet. Each indicates that one sub-packet contains 3D audio samples. In addition, there are four sample flat (sample_flat.spX) bits that are set if there is no useful audio data available at the source device during the time period represented by the sample. This can occur during sample rate changes or transient stream disturbances.
계속되는 3D 오디오 샘플 패킷들은 L-PCM 오디오(즉, 5에서 16 IEC60958 프레임들)의 9에서 32개 사이의 채널들을 포함하는 하나의 3D 오디오 샘플을 처리하도록 사용될 수 있다. Subsequent 3D audio sample packets may be used to process one 3D audio sample comprising between 9 and 32 channels of L-PCM audio (
3D 오디오 샘플의 첫 번째 패킷은 8개 오디오 채널들로 가득 쌓여 있고, 0으로 설정된 시퀀스 번호 필드를 갖는다. 시퀀스 번호는 동일한 3D 오디오 샘플 내에서 각 추가 패킷에 대해 하나씩 증가한다. 마지막 패킷은 3D 오디오 샘플의 전체 채널 수들에 의존하는 8개 또는 그 보다 적은 오디오 채널수를 포함한다. The first packet of the 3D audio sample is filled with 8 audio channels and has a sequence number field set to 0. The sequence number is incremented by one for each additional packet within the same 3D audio sample. The last packet contains 8 or fewer audio channels depending on the total number of channels of the 3D audio sample.
3D 오디오 샘플 패킷을 위한 오직 5개의 유효한 샘플 프레즌트(sample_present) 비트들이 있다. There are only 5 valid sample present (sample_present) bits for a 3D audio sample packet.
< Table 24 - Valid Sample_Present Bit Configurations for 3D Audio transmission>
<Table 24-Valid Sample_Present Bit Configurations for 3D Audio transmission>
도 5 및 6은 3D 오디오 신호의 전송 타이밍일 도시한 도면이다.5 and 6 are diagrams illustrating transmission timing of 3D audio signals.
도 5와 6에서 수평 블랭크 구간(horizontal Blanking Interval)에서 3개의 8채널 2D 오디오 신호 샘플들을 전송하는 것을 알 수 있다. 24 채널의 3D 오디오 신호는 같은 기간 동안 하나의 샘플이 전송된다.
It can be seen from FIGS. 5 and 6 that three 8-channel 2D audio signal samples are transmitted in a horizontal blanking interval. 24 channels of 3D audio signals are transmitted one sample during the same period.
멀티 오디오 데이터 패킷화(Multi-Audio Data Packetization)Multi-Audio Data Packetization
MHL은 MHL 소스 장치가 싱글-AV 스트리밍을 위해 오디오 스트림들을 동시에 전송하도록 하게 한다. 다수 오디오 스트림들은 싱글뷰 또는 멀티뷰 비디오 스트리밍(예를 들면, 뷰 당 다른 오디오들을 갖는 듀얼뷰 게이밍) 중 하나와 연관된다. 보조 오디오 모드들은 화면 분리 태깅(즉, 화면의 다른 부분들이 태그되고 그 자신의 오디오 스트림과 관련된다), 언어 코드들, 또는 시각적/청각적 장애인을 위한 오디오를 나타낼 수 있다. 각각의 오디오 스트림은 하나의 뷰 모드와 관련되고 최대 2개의 오디오 채널들을 포함한다. MHL allows the MHL source device to simultaneously transmit audio streams for single-AV streaming. Multiple audio streams are associated with either single-view or multi-view video streaming (eg, dual-view gaming with different audios per view). The auxiliary audio modes may represent screen split tagging (ie, different parts of the screen are tagged and associated with their own audio stream), language codes, or audio for the visual/deaf. Each audio stream is associated with one view mode and contains up to two audio channels.
멀티 스트림 오디오 샘플 패킷의 각각의 서브 패킷은 0 또는 하나의IEC60958로 정의된 IEC60958 또는 IEC61937 “블록”의 “프레임들”을 포함할 수 있다.Each sub-packet of the multi-stream audio sample packet may include "frames" of IEC60958 or IEC61937 "block" defined as 0 or one IEC60958.
전송되기 위한 4개 이상의 오디오 스트림들이 있을 때, 두 개 또는 그 이상의 연속되는 멀티 오디오 샘플 패킷들은 다수의 오디오 스트림들을 전송하기 위해 사용된다. 패킷 정렬 내의 각 패킷의 순서는 시퀀스 번호 필드에 의해 식별된다. MHL 소스 장치는 싱글 AV 스트림 내에서 최대 16개의 독립 오디오 스트림들을 동시에 전송할 수 있다. When there are four or more audio streams to be transmitted, two or more consecutive multi-audio sample packets are used to transmit multiple audio streams. The order of each packet in the packet arrangement is identified by the sequence number field. The MHL source device can simultaneously transmit up to 16 independent audio streams within a single AV stream.
테이블 25와 26은 MHL 소스 장치가 싱글 뷰 비디오 스트리밍으로 네 개의 오디오 스트림들을 전송할 때, 멀티 오디오 샘플 패킷과 멀티 오디오 메타데이터 패킷 레이아웃의 예들을 보여준다. 멀티 오디오 메타데이터 패킷은 각각의 오디오 스트림의 특징들(보조 정보, 언어)을 설명한다. Tables 25 and 26 show examples of multi-audio sample packets and multi-audio metadata packet layouts when an MHL source device transmits four audio streams through single-view video streaming. The multi-audio metadata packet describes the characteristics (auxiliary information, language) of each audio stream.
테이블 27과 28은 MHL 소스 장치가 듀얼뷰 비디오 스트리밍으로 8개의 오디오 스트림들을 전송할 때, 멀티 오디오 샘플 패킷과 멀티 오디오 메타데이터 패킷 레이아웃의 예들을 보여준다. 멀티 오디오 메타데이터 패킷은 각각의 오디오 스트림의 특징들(관련뷰, 보조 정보, 언어)을 설명한다. Tables 27 and 28 show examples of multi-audio sample packets and multi-audio metadata packet layouts when the MHL source device transmits 8 audio streams through dual-view video streaming. The multi-audio metadata packet describes the characteristics (related views, auxiliary information, language) of each audio stream.
테이블 29와 30은 MHL 소스 장치가 싱글뷰 비디오 스트리밍을 가능하게 하는 화면 분리 태깅 옵션을 가지고 여섯 개의 오디오 스트림들을 전송할 때, 멀티 오디오 샘플 패킷과 멀티 오디오 메타데이터 패킷 레이아웃의 예들을 보여준다. Tables 29 and 30 show examples of multi-audio sample packets and multi-audio metadata packet layouts when an MHL source device transmits six audio streams with a screen separation tagging option that enables single-view video streaming.
< Table 25 - Example of Multi-Audio Sample Packet Layout with 4 audio streams in single view mode><Table 25-Example of Multi-Audio Sample Packet Layout with 4 audio streams in single view mode>
nomalEnglish
nomal
normalKorean
normal
Audio for VIJapanese
Audio for VI
Audio for HISpanish
Audio for HI
< Table 26 - Example of Multi-Audio Metadata Packet Layout (related to the packet in Table 25)><Table 26-Example of Multi-Audio Metadata Packet Layout (related to the packet in Table 25)>
HI를 위한 오디오: 청각적 장애를 위한 오디오 스트림Audio for HI: Audio stream for hearing impairment
VI를 위한 오디오: 시각적 장애를 위한 오디오 스트림Audio for VI: Audio stream for visual impairment
< Table 27 - Example of Multi-Audio Sample Packet Layout with 8 audio streams in dual view mode><Table 27-Example of Multi-Audio Sample Packet Layout with 8 audio streams in dual view mode>
English
nomalLeft View
English
nomal
Korean
normalLeft View
Korean
normal
Spanish
normalLeft View
Spanish
normal
Spanish
Audio for HILeft View
Spanish
Audio for HI
English
Audio for VILeft View
English
Audio for VI
Koean
Audio for VIRight View
Koean
Audio for VI
Japanese
Audio for VIRight View
Japanese
Audio for VI
Chinese
Audio for VIRight View
Chinese
Audio for VI
< Table 28 - Example of Multi-Audio Metadata Packet Layout (related to the packet in Table 27)><Table 28-Example of Multi-Audio Metadata Packet Layout (related to the packet in Table 27)>
HI를 위한 오디오: 청각적 장애를 위한 오디오 스트림Audio for HI: Audio stream for hearing impairment
VI를 위한 오디오: 시각적 장애를 위한 오디오 스트림Audio for VI: Audio stream for visual impairment
< Table 29 - Example of Multi-Audio Sample Packet Layout with 6 audio streams with Split-Screen tagging (in single view) mode><Table 29-Example of Multi-Audio Sample Packet Layout with 6 audio streams with Split-Screen tagging (in single view) mode>
English
normal
English
Korean
normalWindow 2
Korean
Spanish
normalWindow 3
Spanish
Japanese
normalWindow 4
Japanese
normal
English
Audio for HI
English
Audio for
English
Audio for VIWindow 6
English
Audio for VI
< Table 30 - Example of Multi-Audio Metadata Packet Layout (related to the packet in Table 29)><Table 30-Example of Multi-Audio Metadata Packet Layout (related to the packet in Table 29)>
HI를 위한 오디오: 청각적 장애를 위한 오디오 스트림Audio for HI: Audio stream for hearing impairment
VI를 위한 오디오: 시각적 장애를 위한 오디오 스트림
Audio for VI: Audio stream for visual impairment
3D 오디오 메타데이터 패킷화3D audio metadata packetization
액티브 3D 오디오 스트림이 전송될 때마다, 정확한 3D 오디오 메타데이터 패킷이 적어도 두 개 비디오 필드 당 한번 전송된다. Whenever an active 3D audio stream is transmitted, an accurate 3D audio metadata packet is transmitted once per at least two video fields.
새로운 3D 오디오 스트림이 시작할 때, 또는 3D 오디오 메타데이터 패킷과 오디오 인포프레임에 의해 나타낼 수 있는 3D 오디오 스트림에 변화가 있을 때, 수정된 정확한 3D 오디오 메타데이터 패킷은 처음 영향받은 넌 사일런트(non-silent) 오디오 샘플을 따르는 하나의 비디오 프레임 이전에 전송된다. 우선적으로, 이것은 처음 영향 받은 오디오 샘플이 전송되기 바로 직전에 발생한다. When a new 3D audio stream starts, or when there is a change in the 3D audio stream that can be represented by the 3D audio metadata packet and audio infoframe, the corrected 3D audio metadata packet is the first affected non-silent. ) Transmitted before one video frame following the audio sample. First of all, this happens just before the first affected audio sample is transmitted.
3D 오디오 메타데이터 패킷 전송은 수평적 수직적 블랭킹 구간을 포함하는 데이터 플랫폼 구간 이내에서 언제든 발생할 수 있다. Transmission of 3D audio metadata packets can occur at any time within a data platform section including a horizontal and vertical blanking section.
3D 오디오가 스트리밍 될 때, MHL 싱크 장치는 오디오 인포프레임에서 CC와 CA 필드들을 무시하고, 대신에 3D 오디오 메타데이터 패킷에서 3D_CC와 3D_CA를 참고한다.
When 3D audio is streamed, the MHL sink device ignores the CC and CA fields in the audio infoframe, and instead refers to 3D_CC and 3D_CA in the 3D audio metadata packet.
멀티 오디오 메타데이터 패킷화Multi-audio metadata packetization
액티브 멀티-오디오 스트림이 전송될 때마다, 정확한 멀티-오디오 메타데이터 패킷이 적어도 두 개 비디오 필드 당 한번 전송된다. Whenever an active multi-audio stream is transmitted, an exact multi-audio metadata packet is transmitted once per at least two video fields.
새로운 멀티-오디오 스트림이 시작할 때, 또는 멀티-오디오 메타데이터 패킷과 오디오 인포프레임에 의해 나타낼 수 있는 멀티-오디오 스트림에 변화가 있을 때, 수정된 정확한 멀티-오디오 메타데이터 패킷은 처음 영향받은 넌 사일런트(non-silent) 오디오 샘플을 따르는 하나의 비디오 프레임 이전에 전송된다. 우선적으로, 이것은 처음 영향 받은 오디오 샘플이 전송되기 바로 직전에 발생한다. When a new multi-audio stream starts, or when there is a change in the multi-audio stream that can be represented by the multi-audio metadata packet and audio infoframe, the corrected multi-audio metadata packet is the first affected non-silent. It is transmitted before one video frame following the (non-silent) audio sample. First of all, this happens just before the first affected audio sample is transmitted.
멀티-오디오 메타데이터 패킷 전송은 수평적 수직적 블랭킹 구간을 포함하는 데이터 플랫폼 구간 이내에서 언제든 발생할 수 있다.
Multi-audio metadata packet transmission may occur at any time within a data platform section including a horizontal and vertical blanking section.
3D/멀티-오디오 지원을 위한 WRITE_BURST 사용Use of WRITE_BURST for 3D/multi-audio support
3D 오디오 모드에 대한 지원은 테이블 30과 31에서 나타난 것처럼 포맷된 일련의 WRITE_BURST 이동을 사용하여 나타낸다.Support for 3D audio mode is indicated using a series of formatted WRITE_BURST movements as shown in Tables 30 and 31.
< Table 31 - MHL 3D Audio Descriptors (3D_AD) in WRITE_BURST><Table 31-
< Table 32 - 3D Audio Descriptor for Audio Format Code = 1 (LPCM)><Table 32-3D Audio Descriptor for Audio Format Code = 1 (LPCM)>
< Table 33 -3D Audio Descriptor for Audio Format Codes 2 to 8><Table 33 -3D Audio Descriptor for
< Table 34 - 3D Audio Descriptor for Audio Format Codes 9 to 13><Table 34-3D Audio Descriptor for
< Table 35 - 3D Audio Descriptor for Audio Format Code 14 (WMA Pro)><Table 35-3D Audio Descriptor for Audio Format Code 14 (WMA Pro)>
< Table 36- 3D Audio Descriptor for Audio Format Code 15 (extension)><Table 36- 3D Audio Descriptor for Audio Format Code 15 (extension)>
< Table 37 - MHL 3D Channel / Speaker Allocation Descriptor (3D_CSAD) in WRITE_BURST><Table 37-
FRWFLW/
FRW
BRCBLC/
BRC
FRCFLC/
FRC
TpFR
LRdLSd/
LRd
TpRSTpLS/
TpRS
BtFRBtFL/
BtFR
TpBRTpBL/
TpBR
< Table 38 - 3D Channel Speaker Allocation Descriptor for 10.2channel><Table 38-3D Channel Speaker Allocation Descriptor for 10.2channel>
굵은 글씨는 10.2채널과 관련된 지정 스피커를 나타냄.Bold text indicates the designated speaker associated with the 10.2 channel.
FRWFLW/
FRW
BRCBLC/
BRC
FRCFRC
TpFR
LRdLSd/
LRd
TpRSTpLS/
TpRS
BtFRBtFR
TpBRTpBR
< Table 39 - 3D Channel Speaker Allocation Descriptor for 22.2channel><Table 39-3D Channel Speaker Allocation Descriptor for 22.2channel>
굵은 글씨는 22.2채널과 관련된 지정 스피커를 나타냄Bold text indicates designated speakers related to 22.2 channels
FRWFRW
BRCBLC/
BRC
FRCFRC
TpFR
LRdLRd
TpRSTpRS
BtFRBtFR
TpBRTpBR
< Table 40 - 3D Channel Speaker Allocation Descriptor for 30.2channel><Table 40-3D Channel Speaker Allocation Descriptor for 30.2channel>
굵은 글씨는 30.2채널과 관련된 지정 스피커를 나타냄Bold text indicates designated speakers associated with 30.2 channels
Based on ITU-R BS. 2159-4 (Type B, 10.2ch)Up to 10.2 channels
Based on ITU-R BS. 2159-4 (Type B, 10.2ch)
Based on SMPTE 2036-2Up to 22.2 channels
Based on SMPTE 2036-2
Based on IEC 62574/Ed.1ReservedUp to 30.2 channels
Based on IEC 62574/Ed.1Reserved
< Table 41 - 3D_CAST (3D Audio Channel Allocation Standard Type) field>
<Table 41-3D_CAST (3D Audio Channel Allocation Standard Type) field>
링크 제어 버스(Link Control Bus)Link Control Bus
디바이스 레지스터 변경 인터럽트(Device Register Change Interrupt)Device Register Change Interrupt
< Table 42 - Register Change Interrupt Register Details><Table 42-Register Change Interrupt Register Details>
3D_AUD_REQ는 MHL 싱크 장치로부터 3D 오디오 지원 정보를 요청하기 위해 MHL 소스 장치에 의해 사용된다. MHL 스팩 6.14 참조.
3D_AUD_REQ is used by the MHL source device to request 3D audio support information from the MHL sink device. See MHL specification 6.14.
Burst_ID CodeBurst_ID Code
< Table 43 - BURST_ID Codes><Table 43-BURST_ID Codes>
3D_AD와 3D_CSAD는 오디오 연장의 지원을 나타내는데 있어 MHL 싱크 장치에 의해 사용된다. MHL 스팩 7.XX를 참조.
3D_AD and 3D_CSAD are used by the MHL sink device to indicate support for audio extension. See MHL Specification 7.XX.
제어와 구성(Control and Configuration)Control and Configuration
확장된 디바이스 성능 레지스터(Extended Device Capability Register)Extended Device Capability Register
싱크 장치는 소스 장치에 확장된 디바이스 성능 레지스터를 제공할 수 있다. 다시 말해, 소스 장치는 싱크 장치의 확장된 디바이스 성능 레지스터를 읽어올 수 있다.The sink device may provide an extended device capability register to the source device. In other words, the source device may read the extended device capability register of the sink device.
아래 테이블과 같이 MHL 스팩에서 확장된 디바이스 성능 레지스터의 어드레스 0x85를 싱크 장치가 지원하는 멀티 오디오 모드를 나타내는데 사용할 수 있다. As shown in the table below, address 0x85 of the device capability register extended in the MHL specification can be used to indicate the multi-audio mode supported by the sink device.
< Table 44 - Extended Device Capability Register Name and Definition>
< Table 44-Extended Device Capability Register Name and Definition>
멀티 오디오 모드(Multi-Audio Mode)Multi-Audio Mode
각 싱크 장치는, 지원하는 특정 멀티 오디오 모드를 등록하는 멀티오디오모드(MULTI_AUD_MODE)에 표시할 수 있다. Each sink device may display a multi-audio mode (MULTI_AUD_MODE) in which a specific multi-audio mode to be supported is registered.
멀티 오디오 모드 레지스터는 싱크 장치가 화면 분리와 관련된 멀티 오디오 수신 및 처리를 지원하는지를 나타내는 화면분리 오디오 필드(Split Screen Audio Field)를 포함한다. The multi-audio mode register includes a split screen audio field indicating whether the sink device supports multi-audio reception and processing related to screen splitting.
AUD_
LANGSUPP_
AUD_
LANG
AUD_
SUPPLSUPP_
AUD_
SUPPL
AUD_
SPLITSUPP_
AUD_
SPLIT
AUD_
MVSUPP_
AUD_
MV
< Table 45 - MULTI_AUD_MODE Register Details>
<Table 45-MULTI_AUD_MODE Register Details>
장치가 멀티뷰 비디오 스트리밍을 지원할 능력이 없는 경우, 이 필드는 0으로 설정된다.
If the device is not capable of supporting multiview video streaming, this field is set to zero.
멀티 스트림 오디오(Multi-Stream Audio)Multi-Stream Audio
이하에서는 본 발명의 다양한 실시 예에 따른 멀티 스트림 오디오를 설명한다. 이하에서 설명하는 멀티 스트림 오디오 전송 스팩은 HDMI, MHL를 포함하는 다양한 유무선 전송 인터페이스에서 적용될 수 있다. Hereinafter, multi-stream audio according to various embodiments of the present disclosure will be described. The multi-stream audio transmission specification described below can be applied to various wired/wireless transmission interfaces including HDMI and MHL.
본 발명의 소스 장치는 동시에 4개의 오디오 스트림을 전송할 수 있다. 멀티 스트림 오디오 샘플 패킷(Multi-stream Audio Sample Packet)에 대해서 모든 오디오 스트림들은 하나의 오디오 인포프레임(Infoframe)을 공유한다. The source device of the present invention can simultaneously transmit 4 audio streams. For a multi-stream audio sample packet, all audio streams share one audio infoframe.
본 발명의 다양한 실시 예에 따른 유선 인터페이스는 싱글 뷰 비디오 스트리밍에 대한 지원(예를 들어, 여러 언어(multi-lingual)를 지원하거나 시각/청각 장애인을 위한 오디오 등)을 추가할 수 있다. 이는 오디오 메타 데이터 패킷(Audio Metadata Packet)을 수정하거나 HDMI 오디오 데이터 블록(HDMI Audio Data Block)을 수정하여 할 수 있다. A wired interface according to various embodiments of the present disclosure may add support for single-view video streaming (eg, multi-lingual support or audio for visually or deaf people). This can be done by modifying the Audio Metadata Packet or by modifying the HDMI Audio Data Block.
예를 들어, 아래 테이블 46과 같이 멀티 스트림 오디오는 여러 언어를 지원하고, 오디오는 2채널로 지원될 수 있다. For example, as shown in Table 46 below, multi-stream audio may support multiple languages, and audio may be supported in two channels.
< Table 46 -Overview of Supports of Multi-stream Audio for single view>
<Table 46 -Overview of Supports of Multi-stream Audio for single view>
시나리오scenario
아래 테이블은 가능한 시나리오를 도시한다.The table below shows possible scenarios.
< Table 47 - Scenarios of Multi-stream Audio Sample Packet>
<Table 47-Scenarios of Multi-stream Audio Sample Packet>
4개의 서브 패킷을 갖는 멀티 스트림 오디오 샘플 패킷의 경우 1) 싱글 뷰를 위한 오디오 디스크립션(audio description)과 함께 싱글 TV 프로그램이 전송되는 경우 스트림 0은 노멀(normal) 오디오 신호를 포함하고, 스트림 1은 시각 장애인을 위한 오디오 디스크립션 신호를 포함할 수 있다. In the case of a multi-stream audio sample packet having 4 sub-packets 1) When a single TV program is transmitted with an audio description for a single view,
2) 상기 싱글 뷰에서 2개 국어를 지원하는 경우, 지원되는 언어로 된 오디오 신호 스트림 2개와, 각각에 대응되는 오디오 디스크립션이 함께 전송된다. 예를 들어, 영어와 한국어가 지원되는 경우, 스트림 0은 한국어 노멀 오디오 신호, 스트림 1은 시각 장애인을 위한 한국어 오디오 디스크립션 신호, 스트림 2는 영어 노멀 오디오 신호, 스트림 3은 시각 장애인을 위한 영어 오디오 디스크립션 신호를 각각 포함할 수 있다. 2) When the single view supports two languages, two audio signal streams in the supported languages and audio descriptions corresponding to each are transmitted together. For example, when English and Korean are supported,
3)싱글 뷰에서 한가지 언어로 된 오디오 신호 스트림 하나와 이에 대한 상이한 언어로 지원되는 시각 장애인을 위한 오디오 디스크립션 신호가 두 개 전송될 수도 있다. 예를 들어, 스트림 0은 한국어 또는 영어 노멀 오디오 신호, 스트림 1은 시각 장애인을 위한 한국어 오디오 디스크립션 신호, 스트림 2는 시각 장애인을 위한 영어 오디오 디스크립션 신호를 각각 포함할 수 있다. 3) In a single view, one audio signal stream in one language and two audio description signals for the visually impaired supported in different languages for the same may be transmitted. For example,
4) 소스 장치가 멀티뷰를 위한 오디오 신호를 전송할 수도 있다. 듀얼 뷰가 지원되는 경우, 가장 기본적인 형태는 각 뷰에 대한 오디오 신호를 하나의 전송 스트림으로 전송하는 것이다. 듀얼 뷰의 경우 독립적인 제1 뷰와 제2 뷰를 포함하고, 각 뷰는 독립적인 콘텐츠를 제공한다. 4) The source device may transmit an audio signal for multiview. When dual view is supported, the most basic form is to transmit an audio signal for each view in one transport stream. In the case of the dual view, an independent first view and a second view are included, and each view provides independent content.
5) 각 뷰에 대해 2개 국어가 지원될 수 있다. 이 경우, 제1 뷰에 대한 제1 언어로 된 오디오 신호 스트림, 제1 뷰에 대한 제2 언어로 된 오디오 신호 스트림, 제2 뷰에 대한 제1 언어로 된 오디오 신호 스트림, 제2 뷰에 대한 제2 언어로 된 오디오 신호 스트림이 각각 전송될 수 있다. 예를 들어, 영어와 한국어가 지원되는 경우, 스트림 0은 제1 뷰에 대한 한국어 오디오 신호, 스트림 1은 제1 뷰에 대한 영어 오디오 신호, 스트림 2는 제2 뷰에 대한 한국어 오디오 신호, 스트림 3은 제2 뷰에 대한 영어 오디오 신호를 포함할 수 있다. 5) Two languages can be supported for each view. In this case, an audio signal stream in a first language for a first view, an audio signal stream in a second language for a first view, an audio signal stream in a first language for a second view, and a second view. Each audio signal stream in a second language may be transmitted. For example, if English and Korean are supported,
6) 듀얼 뷰의 경우 어느 하나의 뷰는 시각장애인을 위한 오디오 디스크립션 신호를 더 전송할 수 있다. 즉, 제1 뷰에 대한 오디오 신호 스트림, 제2 뷰에 대한 노멀 오디오 신호 스트림, 제2 뷰에 대한 시각 장애인을 위한 오디오 디스크립션 신호 스트림이 각각 전송될 수 있다. 예를 들어, 스트림 0은 제1 뷰에 대한 오디오 신호, 스트림 1은 제2 뷰에 대한 오디오 신호, 스트림 3은 제2 뷰에 대한 오디오 디스크립션 신호를 포함할 수 있다. 6) In the case of dual view, any one view may further transmit an audio description signal for the visually impaired. That is, an audio signal stream for a first view, a normal audio signal stream for a second view, and an audio description signal stream for a visually impaired person for a second view may be transmitted, respectively. For example,
7) 하나의 스트림은 공통 오디오 신호를 전송하는데 사용할 수도 있다. 즉, 제1 뷰와 제2 뷰에 대한 공통 오디오 신호 스트림, 제1 뷰 전용 오디오 스트림, 제2 뷰 전용 오디오 스트림이 각각 전송될 수 있다. 이 경우 수신단에서는 공통 오디오 스트림과 전용 오디오 스트림을 먹싱(Muxing)하여 출력한다. 이러한 시나리오는 게임의 경우 적용될 수 있다. 예를 들어, 스트림 0은 제1 뷰와 제2 뷰에 대한 공통 오디오 신호(예를 들어, 배경음향, 진행 안내 보이스 등), 스트림 1은 제1 뷰에 대한 전용 오디오 신호, 스트림 2는 제2 뷰에 대한 전용 오디오 신호를 포함할 수 있다.
7) One stream may be used to transmit a common audio signal. That is, a common audio signal stream for the first view and the second view, an audio stream dedicated to the first view, and an audio stream dedicated to the second view may be transmitted, respectively. In this case, the receiving end outputs a common audio stream and a dedicated audio stream by muxing. This scenario can be applied in the case of games. For example,
도 7은 본 발명의 일 실시 예에 따른 데이터 송수신 시스템(1000-1)의 구성을 도시한 블록도이다. 7 is a block diagram showing the configuration of a data transmission/reception system 1000-1 according to an embodiment of the present invention.
도 7을 참조하면, 본 발명의 일 실시 예에 따른 데이터 송수신 시스템(1000-1)은, 데이터 전송 장치(100-1)와 데이터 수신 장치(200-1)를 포함한다. Referring to FIG. 7, a data transmission/reception system 1000-1 according to an embodiment of the present invention includes a data transmission device 100-1 and a data reception device 200-1.
데이터 전송 장치(100-1)는 제1 서브 패킷 및 제2 서브 패킷 포함하는 패킷을 데이터 수신 장치(200-1)로 전송한다. The data transmission device 100-1 transmits a packet including a first sub packet and a second sub packet to the data receiving device 200-1.
데이터 수신 장치(200-1)는 상기 데이터 전송 장치(100-1)로부터 제1 서브 패킷 및 제2 서브 패킷 포함하는 상기 패킷을 수신한다.The data receiving device 200-1 receives the packet including a first sub packet and a second sub packet from the data transmission device 100-1.
이때, 상기 제1 서브 패킷 및 상기 제2 서브 패킷은 제1 콘텐츠에 대한 상이한 오디오 데이터를 포함한다. In this case, the first sub-packet and the second sub-packet include different audio data for the first content.
이하에서 데이터 전송 장치(100-1)와 데이터 수신 장치(200-1)의 구성을 좀더 상세하게 설명한다. Hereinafter, configurations of the data transmission device 100-1 and the data reception device 200-1 will be described in more detail.
도 8은, 본 발명의 일 실시 예에 따른 데이터 전송 장치(100-1)의 구성을 도시한 블록도이다.8 is a block diagram showing the configuration of a data transmission apparatus 100-1 according to an embodiment of the present invention.
도 8을 참조하면, 본 발명의 일 실시 예에 따른 데이터 전송 장치(100-1)는, 패킷 생성부(110)와 전송부(120)를 포함한다.Referring to FIG. 8, a data transmission apparatus 100-1 according to an embodiment of the present invention includes a
패킷 생성부(110)는, 제1 서브 패킷 및 제2 서브 패킷 포함하는 패킷을 생성한다. 이때, 상기 제1 서브 패킷 및 상기 제2 서브 패킷은 제1 콘텐츠에 대한 상이한 오디오 데이터를 포함한다. The
전송부(120)는 상기 생성된 패킷을 데이터 수신 장치(200-1)로 전송한다. The
이때, 상기 제1 서브 패킷은 비장애인을 위한 오디오 데이터를 포함하고, 상기 제2 서브 패킷은 시각 장애인을 위한 오디오 데이터를 포함할 수 있다.In this case, the first sub-packet may include audio data for a non-disabled person, and the second sub-packet may include audio data for a visually impaired person.
또한, 상기 제1 서브 패킷 및 상기 제2 서브 패킷은 상이한 언어로 된 오디오 데이터를 포함할 수 있다.In addition, the first sub-packet and the second sub-packet may include audio data in different languages.
또한, 상기 제1 서브 패킷은 상기 제2 서브 패킷에 대한 오디오 디스크립션에 해당하는 오디오 데이터를 포함할 수 있다.Also, the first subpacket may include audio data corresponding to an audio description of the second subpacket.
또한, 상기 패킷은, 상기 제1 콘텐츠와 상이한 제2 콘텐츠에 대한 오디오 데이터를 포함하는 제3 서브 패킷을 더 포함할 수 있다.In addition, the packet may further include a third sub-packet including audio data for second content different from the first content.
이때, 상기 제1 서브 패킷이 포함하는 오디오 데이터는 상기 제1 콘텐츠에 대한 전용 오디오 데이터이고, 상기 제3 서브 패킷이 포함하는 오디오 데이터는 상기 제2 콘텐츠에 대한 전용 오디오 데이터이며, 상기 제2 서브 패킷이 포함하는 오디오 데이터는, 상기 제1 콘텐츠 및 상기 제2 콘텐츠에 대한 공통 오디오 데이터가 될 수 있다.At this time, the audio data included in the first subpacket is dedicated audio data for the first content, the audio data included in the third subpacket is dedicated audio data for the second content, and the second subpacket Audio data included in the packet may be common audio data for the first content and the second content.
또한, 상기 패킷은, 제2 콘텐츠에 대한 오디오 데이터를 포함하는 제4 서브 패킷을 더 포함할 수 있고, 상기 제3 서브 패킷과 상기 제4 서브 패킷은 상이한 오디오 데이터를 포함할 수 있다. Also, the packet may further include a fourth sub-packet including audio data for the second content, and the third sub-packet and the fourth sub-packet may include different audio data.
도 9는, 본 발명의 일 실시 예에 따른 데이터 수신 장치(200-1)의 구성을 도시한 블록도이다.9 is a block diagram showing the configuration of a data receiving apparatus 200-1 according to an embodiment of the present invention.
도 9를 참조하면, 본 발명의 일 실시 예에 따른 데이터 수신 장치(200-1)는, 수신부(210)와 파싱부(220)를 포함한다. Referring to FIG. 9, a data receiving apparatus 200-1 according to an embodiment of the present invention includes a receiving
수신부(210)는, 데이터 전송 장치(100-1)로부터 제1 서브 패킷 및 제2 서브 패킷 포함하는 패킷을 수신한다. 이때, 상기 제1 서브 패킷 및 상기 제2 서브 패킷은 제1 콘텐츠에 대한 상이한 오디오 데이터를 포함할 수 있다.The receiving
파싱부(220)는, 상기 수신된 제1 서브 패킷 및 상기 제2 서브 패킷을 파싱하는 구성이다. The
상기 제1 서브 패킷 및 상기 제2 서브 패킷은 상이한 언어로 된 오디오 데이터를 포함할 수 있다.The first sub-packet and the second sub-packet may include audio data in different languages.
이와 달리, 상기 제1 서브 패킷은 상기 제2 서브 패킷에 대한 오디오 디스크립션에 해당하는 오디오 데이터를 포함할 수 있다.Alternatively, the first sub-packet may include audio data corresponding to an audio description of the second sub-packet.
또한, 상기 패킷은, 상기 제1 콘텐츠와 상이한 제2 콘텐츠에 대한 오디오 데이터를 포함하는 제3 서브 패킷을 더 포함할 수 있다.In addition, the packet may further include a third sub-packet including audio data for second content different from the first content.
이때, 상기 제1 서브 패킷이 포함하는 오디오 데이터는 상기 제1 콘텐츠에 대한 전용 오디오 데이터이고, 상기 제3 서브 패킷이 포함하는 오디오 데이터는 상기 제2 콘텐츠에 대한 전용 오디오 데이터이며, 상기 제2 서브 패킷이 포함하는 오디오 데이터는, 상기 제1 콘텐츠 및 상기 제2 콘텐츠에 대한 공통 오디오 데이터가 될 수 있다.At this time, the audio data included in the first subpacket is dedicated audio data for the first content, the audio data included in the third subpacket is dedicated audio data for the second content, and the second subpacket Audio data included in the packet may be common audio data for the first content and the second content.
또한, 상기 패킷은, 제2 콘텐츠에 대한 오디오 데이터를 포함하는 제4 서브 패킷을 더 포함할 수 있고, 상기 제3 서브 패킷과 상기 제4 서브 패킷은 상이한 오디오 데이터를 포함할 수 있다.
Also, the packet may further include a fourth sub-packet including audio data for the second content, and the third sub-packet and the fourth sub-packet may include different audio data.
오디오 메타 데이터 패킷(Audio Metadata Packet)Audio Metadata Packet
소스 장치는 오디오 메타 데이터 패킷을 싱크 장치로 전송하여, 전송되는 오디오 스팩을 알려준다. 이때, 오디오 메타 데이터 패킷의 헤더는 하기와 같은 구조를 갖는다. The source device transmits the audio metadata packet to the sink device, and informs the transmitted audio specification. In this case, the header of the audio metadata packet has the following structure.
< Table 48 - Audio Metadata Packet Header>
<Table 48-Audio Metadata Packet Header>
각 필드를 설명하면 다음과 같다.Each field is described as follows.
3D 오디오 필드(3D_AUDIO) [1bit]: 3D_AUDIO=1이면, 오디오 메타 데이터 패킷(Audio Metadata Packet)은 3D 오디오 채널 카운트(3D Audio Channel count : 3D_CC필드. 아래 테이블 참조)와 채널/스피커 할당 정보(ACAST : Audio Channel Allocation Standard Type) 필드(아래 테이블 참조)를 포함한다. 소스가 3D 오디오 패킷을 전송할 때, 이러한 필드는 1로 설정될 것이다. 3D Audio Field (3D_AUDIO) [1bit]: If 3D_AUDIO=1, the Audio Metadata Packet is a 3D audio channel count (3D Audio Channel count: 3D_CC field, see table below) and channel/speaker assignment information (ACAST). : Audio Channel Allocation Standard Type) field (refer to the table below) is included. When the source transmits a 3D audio packet, this field will be set to 1.
뷰 개수 필드(NUM_VIEWS) [2bits] : 뷰의 개수를 나타낸다. NUM_VIEWS=00이면, 싱글뷰 비디오 스트리밍이 지원된다. NUM_VIEWS=01이면, 듀얼뷰 비디오 스트리밍이 지원된다. 이 모드는 VSIF에서의 3D_DualView=1인 경우만 허용된다. 나머지 NUM_VIEWS 값에 대해서는 미래의 사용을 위해 리저브되어 있다. View Count field (NUM_VIEWS) [2bits]: Indicates the number of views. If NUM_VIEWS=00, single view video streaming is supported. If NUM_VIEWS=01, dual-view video streaming is supported. This mode is allowed only when 3D_DualView=1 in VSIF. The remaining NUM_VIEWS values are reserved for future use.
오디오 스트림 개수 필드(NUM_AUDIO_STR) [2bits]: 오디오 스트림의 개수-1을 나타낸다. NUM_AUDIO_STR=01, 10, 또는 11인 경우, 오디오 메타 데이터 패킷(Audio Metadata Packet)은 최대 4개까지 오디오 메타 데이터 디스크립터(audio metadata descriptor)를 포함하고, 각각은 오디오 스트림에 대응된다. Number of audio streams field (NUM_AUDIO_STR) [2bits]: indicates the number of audio streams -1. When NUM_AUDIO_STR=01, 10, or 11, audio metadata packets include up to four audio metadata descriptors, each corresponding to an audio stream.
< Table 49 - Valid Combinations>
<Table 49-Valid Combinations>
아래 테이블은 3D오디오를 위한 오디오 메타 데이터 패킷의 페이로드를 나태낸다. 3D_Audio=1인 경우 메타 데이터 패킷 페이로드는 아래의 구조를 갖는다. The table below shows the payload of the audio metadata packet for 3D audio. When 3D_Audio=1, the meta data packet payload has the following structure.
< Table 50 ? Audio Metadata Packet Payload(3D_AUDIO==1)>
<Table 50? Audio Metadata Packet Payload(3D_AUDIO==1)>
즉, 3D 오디오 채널 카운트 정보를 나타내는 3D_CC필드와, 소스에 의해 제공되는 오디오 채널 할당 표준 타입을 표시하는 ACAST필드를 포함한다. That is, a 3D_CC field indicating 3D audio channel count information and an ACAST field indicating an audio channel allocation standard type provided by a source are included.
테이블 51은 3D_CC 값에 따른 오디오 채널을 나타내고 있으며, 테이블 52는 ACAST필드 값에 따른 오디오 채널 할당 표준 타입을 나타낸다.Table 51 shows audio channels according to 3D_CC values, and Table 52 shows audio channel allocation standard types according to ACAST field values.
< Table 51 3D_CC field><Table 51 3D_CC field>
< Table 52 - Audio Channel Allocation Standard Type field>
<Table 52-Audio Channel Allocation Standard Type field>
아래 테이블은 멀티 스트림 오디오를 위한 오디오 메타 데이터 패킷의 페이로드를 나태낸다. 3D_Audio=0인 경우 메타 데이터 패킷 페이로드는 아래의 구조를 갖는다. The table below shows the payload of an audio metadata packet for multi-stream audio. When 3D_Audio=0, the meta data packet payload has the following structure.
< Table 53 ? Audio Metadata Packet Payload(3D_AUDIO==0)>
<Table 53? Audio Metadata Packet Payload(3D_AUDIO==0)>
상기 테이블 53에 도시된 것처럼 오디오 메타 데이터 패킷의 페이로드는 각각 5 바이트 짜리 오디오 메타 데이터 디스크립터(Audio_Metadata_Descriptor)를 포함한다. 오디오 메타 데이터 디스크립터(4 필드, 각 5바이트)는 멀티 스트림 오디오 샘플 패킷(Multi-stream Audio Sample Packet)에서 서브 패킷 X에 대한 오디오 메타 데이터 또는 멀티 스트림 원비트 오디오 샘플 패킷(Multi-stream One Bit Audio Sample Packet)에서 서브패킷 X에 대한 오디오 메타 데이터를 표현한다. 오디오 메타 데이터 디스크립터는 하기에서 구조가 설명된다. As shown in Table 53, the payload of the audio metadata packet includes an audio metadata descriptor (Audio_Metadata_Descriptor) of 5 bytes each. The audio metadata descriptor (4 fields, 5 bytes each) is the audio metadata for sub-packet X in the multi-stream audio sample packet or the multi-stream one-bit audio sample packet. Sample Packet) expresses audio metadata for subpacket X. The structure of the audio meta data descriptor is described below.
< Table 54 - Audio Metadata Descriptor(멀티 스트림 ASP에서 각 서브패킷 X에 대한 것임)>
<Table 54-Audio Metadata Descriptor (for each subpacket X in multi-stream ASP)>
각 필드를 설명하면 아래와 같다. Each field is described below.
긴급 채널 필드(Emergency_Channel) [1bit] : Emergency_Channel=1이면, 대응되는 오디오 스트림은 긴급 경고 오디오 데이터를 전송한다. 수신 장치는 스크립트 등을 통해 긴급 방송이 있음을 알릴 수 있고, 사용자는 오디오 선택을 통해 수신받은 긴급 경고 오디오 신호를 출력시킬 수 있다.Emergency channel field (Emergency_Channel) [1bit]: When Emergency_Channel=1, the corresponding audio stream transmits emergency warning audio data. The receiving device may notify that there is an emergency broadcast through a script or the like, and the user may output an emergency warning audio signal received through audio selection.
멀티뷰 필드(좌측)(Multiview_Left) [1bit] : Multiview_Left=1이면, 대응되는 오디오 스트림이 3D 비디오 포맷에서 좌측 입체 영상에 매핑된다. 만일 Multiview_Left=0이면, 이 필드는 NUM_VIEWS=01인 경우만, 유효하다. Multiview Field (Left) (Multiview_Left) [1bit]: If Multiview_Left=1, the corresponding audio stream is mapped to the left stereoscopic image in the 3D video format. If Multiview_Left=0, this field is valid only when NUM_VIEWS=01.
멀티뷰 필드(우측)(Multiview_Right [1bit] : Multiview_Right=1이면, 대응되는 오디오 스트림이 3D 비디오 포맷에서 우측 입체 영상에 매핑된다. 만일 Multiview_Right=0이면, 이 필드는 NUM_VIEWS=01인 경우만, 유효하다. Multiview field (right side) (Multiview_Right [1bit]: If Multiview_Right=1, the corresponding audio stream is mapped to the right stereoscopic image in the 3D video format. If Multiview_Right=0, this field is valid only when NUM_VIEWS=01) Do.
언어 코드 유효 필드(LC_Valid) [1bit]: LC_Valid=1이면, 언어 코드(Language_Code)가 유효하고, 대응되는 오디오 스트림의 언어를 정확하게 식별한다. 그렇지 않으면, 대응되는 오디오 스트림의 언어는 명시되지 않는 것으로 된다. Language code valid field (LC_Valid) [1bit]: If LC_Valid=1, the language code (Language_Code) is valid, and the language of the corresponding audio stream is accurately identified. Otherwise, the language of the corresponding audio stream becomes unspecified.
보조 오디오 유효 필드(Suppl_A_Valid) [1bit]: Suppl_A_Valid=1이면, 대응되는 오디오 스트림은 Suppl_A_Type에 의해 나타난 보조 오디오 트랙(supplemental audio track)을 포함한다. Supplementary audio valid field (Suppl_A_Valid) [1bit]: When Suppl_A_Valid=1, the corresponding audio stream includes a supplemental audio track indicated by Suppl_A_Type.
프리믹스 보조 오디오 필드(Suppl_A_Mixed [1bit]: Suppl_A_Mixed=1이면, 대응되는 오디오 스트림은 메인 오디오 컴포넌트와 Suppl_A_Type에 의해 나타난 프리 믹스 보조 오디오 트랙(pre-mixed supplemental audio track)을 포함할 수 있다. 이 비트는 Suppl_A_Valid=1인 경우만 유효하다.Premixed auxiliary audio field (Suppl_A_Mixed [1bit]: If Suppl_A_Mixed=1, the corresponding audio stream may include a main audio component and a pre-mixed supplemental audio track indicated by Suppl_A_Type. This bit is for Valid only when Suppl_A_Valid=1.
보조 오디오 타입 필드(Suppl_A_Type) [3bits] : 하기의 테이블에서 정의된 보조 오디오 타입을 나타낸다. 이 필드는 Suppl_A_Valid=1인 경우만 유효하다. 테이블 55는 보조 오디오 타입 필드 값의 디스크립션을 나타낸다. An auxiliary audio type field (Suppl_A_Type) [3bits]: represents an auxiliary audio type defined in the following table. This field is valid only when Suppl_A_Valid=1. Table 55 shows a description of an auxiliary audio type field value.
언어 코드(Language_Code) [3Bytes]: 대응되는 오디오 스트림의 언어를 식별한다. 언어 코드는 ISO639에서 정의된다. 그리고, 3 캐릭터 코드가 위치하는데, 마지막 캐릭터 코드는 오디오 메타 데이터 디스크립터 X(Audio_Metadata_Descriptor_X)의 마지막 바이트와 일치한다. 이 필드는 LC_Valid=1인 경우만 유효하다.Language code (Language_Code) [3Bytes]: Identifies the language of the corresponding audio stream. Language codes are defined in ISO639. Then, a three-character code is located, and the last character code matches the last byte of the audio metadata descriptor X (Audio_Metadata_Descriptor_X). This field is valid only when LC_Valid=1.
< Table 55 - SUPPL_A_TYPE 필드>
<Table 55-SUPPL_A_TYPE field>
도 10은 본 발명의 다른 실시 예에 따른 데이터 송수신 시스템(1000-2)의 구성을 도시한 블록도이다. 10 is a block diagram showing the configuration of a data transmission/reception system 1000-2 according to another embodiment of the present invention.
도 10을 참조하면, 본 발명의 다른 실시 예에 따른 데이터 송수신 시스템(1000-2)은, 데이터 전송 장치(100-2)와 데이터 수신 장치(200-2)를 포함한다.Referring to FIG. 10, a data transmission/reception system 1000-2 according to another embodiment of the present invention includes a data transmission device 100-2 and a data reception device 200-2.
데이터 전송 장치(100-2)는, 오디오 메타 데이터 패킷을 생성하여 데이터 수신 장치(200-2)로 전송한다. The data transmission device 100-2 generates an audio metadata packet and transmits it to the data reception device 200-2.
데이터 수신 장치(200-2)는, 상기 데이터 전송 장치(100-2)로부터 상기 오디오 메타 데이터 패킷을 수신한다. The data receiving device 200-2 receives the audio metadata packet from the data transmission device 100-2.
이때, 상기 오디오 메타 데이터 패킷의 헤더(header)는, 3D 오디오 샘플 패킷의 전송여부를 나타내는 3D 오디오 필드(3D Audio Field)를 포함한다. In this case, the header of the audio metadata packet includes a 3D audio field indicating whether to transmit a 3D audio sample packet.
이하에서는 데이터 전송장치(100-2)와 데이터 수신 장치(200-2)의 구성과 오디오 메타 데이터 패킷의 구성을 좀더 상세하게 설명한다.Hereinafter, the configuration of the data transmission device 100-2 and the data reception device 200-2 and the configuration of an audio metadata packet will be described in more detail.
도 11은 본 발명의 다른 실시 예에 따른 데이터 전송 장치(100-2)는, 패킷 생성부(110)와 전송부(120)를 포함한다. 11 illustrates a data transmission device 100-2 according to another embodiment of the present invention, and includes a
패킷 생성부(110)는, 오디오 메타 데이터 패킷을 생성한다. 상기 생성된 오디오 메타 데이터 패킷의 헤더(header)는, 3D 오디오 샘플 패킷의 전송여부를 나타내는 3D 오디오 필드(3D Audio Field)를 포함할 수 있다.The
전송부(120)는, 상기 생성된 오디오 메타 데이터 패킷을 데이터 수신 장치(200-2)로 전송한다. The
또한, 상기 생성된 오디오 메타 데이터 패킷의 헤더는, 전송되는 오디오 스트림의 개수 정보를 나타내는 오디오 스트림 개수 필드(Number Of Audio Stream Field)를 더 포함할 수 있다.In addition, the header of the generated audio metadata packet may further include a Number Of Audio Stream Field indicating information on the number of transmitted audio streams.
또한, 상기 생성된 오디오 메타 데이터 패킷의 헤더는, 전송되는 상이한 콘텐츠의 개수 정보를 나타내는 뷰 개수 필드(Number Of Views Field)를 더 포함할 수 있다. In addition, the header of the generated audio metadata packet may further include a Number Of Views Field indicating information on the number of different contents to be transmitted.
또한, 상기 생성된 오디오 메타 데이터 패킷의 페이로드(payload)는, 멀티 스트림 오디오 샘플 패킷(Multi-stream Audio Sample Packet) 또는 멀티 스트림 원비트 오디오 샘플 패킷(Multi-stream One Bit Audio Sample Packet)의 서브패킷에 대한 메타 데이터를 나타내는 오디오 메타 데이터 디스크립터 필드를 포함할 수 있다. In addition, the payload of the generated audio meta data packet is a sub of a multi-stream audio sample packet or a multi-stream one bit audio sample packet. It may include an audio metadata descriptor field indicating metadata about a packet.
또한, 상기 오디오 메타 데이터 디스크립터 필드는, 긴급 상황 방송이 있는지를 나타내는 긴급 채널 필드(Emergency Channel Field), 멀티 뷰에서 좌안 또는 우안 영상에 대응되는 오디오 데이터를 포함하는지를 나타내는 멀티뷰 필드(Multivew Field), 오디오 데이터에 대한 언어의 식별 유무를 나타내는 언어 코드 유효 필드(Language Code Valid Field), 보조 오디오 데이터 유무를 나타내는 보조 오디오 유효 필드(Supplemental Audio Valid Field), 메인 오디오 데이터와 상기 보조 오디오 데이터의 프리 믹스 여부를 나타내는 프리믹스 보조 오디오 필드(pre-mixed Supplemental Audio Field), 상기 보조 오디오 데이터의 타입을 나타내는 보조 오디오 타입 필드(Supplemental Audio Type Field), 및 오디오 데이터에 대한 언어 코드를 나타내는 언어 코드 필드(Language Code Field) 중 적어도 하나를 포함할 수 있다. In addition, the audio metadata descriptor field includes an emergency channel field indicating whether there is an emergency broadcast, a multi-view field indicating whether audio data corresponding to a left-eye or right-eye image is included in a multi-view, A language code valid field indicating the presence or absence of a language for audio data, a supplemental audio valid field indicating the presence or absence of auxiliary audio data, whether the main audio data and the auxiliary audio data are premixed A pre-mixed supplemental audio field indicating a pre-mixed supplemental audio field, a supplemental audio type field indicating a type of the auxiliary audio data, and a language code field indicating a language code for audio data. ) May include at least one of.
도 12는 본 발명의 다른 실시 예에 따른 데이터 수신 장치(200-2)의 구성을 도시한 블록도이다.12 is a block diagram showing the configuration of a data receiving apparatus 200-2 according to another embodiment of the present invention.
도 12를 참조하면, 본 발명의 다른 실시 예에 따른 데이터 수신 장치(200-2)는, 수신부(210)와, 파싱부(220)를 포함한다. Referring to FIG. 12, a data receiving apparatus 200-2 according to another embodiment of the present invention includes a receiving
수신부(210)는, 데이터 전송 장치(100-2)로부터 오디오 메타 데이터 패킷을 수신하는 구성이다. 상기 오디오 메타 데이터 패킷의 헤더(header)는, 3D 오디오 샘플 패킷의 전송여부를 나타내는 3D 오디오 필드(3D Audio Field)를 포함한다. The receiving
파싱부(220)는, 상기 수신된 오디오 메타 데이터 패킷을 파싱하는 구성이다. The
또한, 상기 오디오 메타 데이터 패킷의 헤더는, 수신되는 오디오 스트림의 개수 정보를 나타내는 오디오 스트림 개수 필드(Number Of Audio Stream Field)를 더 포함할 수 있다. In addition, the header of the audio metadata packet may further include a Number Of Audio Stream Field indicating information on the number of received audio streams.
또한, 상기 오디오 메타 데이터 패킷의 헤더는, 수신되는 상이한 콘텐츠의 개수 정보를 나타내는 뷰 개수 필드(Number Of Views Field)를 더 포함할 수 있다. In addition, the header of the audio metadata packet may further include a Number Of Views Field indicating information on the number of different contents to be received.
또한, 상기 오디오 메타 데이터 패킷의 페이로드(payload)는, 멀티 스트림 오디오 샘플 패킷(Multi-stream Audio Sample Packet) 또는 멀티 스트림 원비트 오디오 샘플 패킷(Multi-stream One Bit Audio Sample Packet)의 서브패킷에 대한 메타 데이터를 나타내는 오디오 메타 데이터 디스크립터 필드를 포함할 수 있다. In addition, the payload of the audio meta data packet is a subpacket of a multi-stream audio sample packet or a multi-stream one bit audio sample packet. It may include an audio meta data descriptor field indicating meta data for the data.
이때, 상기 오디오 메타 데이터 디스크립터 필드는, 긴급 상황 방송이 있는지를 나타내는 긴급 채널 필드(Emergency Channel Field), 멀티 뷰에서 좌안 또는 우안 영상에 대응되는 오디오 데이터를 포함하는지를 나타내는 멀티뷰 필드(Multivew Field), 오디오 데이터에 대한 언어의 식별 유무를 나타내는 언어 코드 유효 필드(Language Code Valid Field), 보조 오디오 데이터 유무를 나타내는 보조 오디오 유효 필드(Supplemental Audio Valid Field), 메인 오디오 데이터와 상기 보조 오디오 데이터의 프리 믹스 여부를 나타내는 프리믹스 보조 오디오 필드(pre-mixed Supplemental Audio Field), 상기 보조 오디오 데이터의 타입을 나타내는 보조 오디오 타입 필드(Supplemental Audio Type Field), 및 오디오 데이터에 대한 언어 코드를 나타내는 언어 코드 필드(Language Code Field) 중 적어도 하나를 포함할 수 있다.
In this case, the audio meta data descriptor field includes an emergency channel field indicating whether there is an emergency broadcast, a multi view field indicating whether audio data corresponding to a left-eye or right-eye image is included in a multi-view, A language code valid field indicating the presence or absence of a language for audio data, a supplemental audio valid field indicating the presence or absence of auxiliary audio data, whether the main audio data and the auxiliary audio data are premixed A pre-mixed supplemental audio field indicating a pre-mixed supplemental audio field, a supplemental audio type field indicating a type of the auxiliary audio data, and a language code field indicating a language code for audio data. ) May include at least one of.
오디오 데이터 블록(Audio Data Block)Audio Data Block
아래는 EDID (Extended Display Identification Data)의 오디오 데이터 블록을 나타내는 테이블이다. 아래 테이블에서 3-4바이트 부분은 하기의 테이블로 재정의한다. The following is a table showing an audio data block of EDID (Extended Display Identification Data). In the table below, 3-4 bytes are redefined to the table below.
또한, 멀티스트림 오디오를 위한 새로운 단축 오디오 디스크립터(Short Audio Descriptor : SAD)는 삭제하고, 대신에 EDID에서 정의된 노멀(normal) SAD 를 사용한다. 추가된 내용에 따르면, 2개의 채널까지 전송될 수 있다.In addition, a new short audio descriptor (SAD) for multi-stream audio is deleted, and a normal SAD defined in EDID is used instead. According to the added content, up to two channels can be transmitted.
< Table 56 - HDMI Audio Data Block>
<Table 56-HDMI Audio Data Block>
아래 테이블은 상기 오디오 데이터 블록의 3-4바이트를 대체하는 블록 구성을 나타낸다.The table below shows a block configuration replacing 3-4 bytes of the audio data block.
< Table 57 - Byte 3-4 of HDMI Audio Data Block>
<Table 57-Byte 3-4 of HDMI Audio Data Block>
각 필드를 설명하면 다음과 같다.Each field is described as follows.
긴급 채널 필드 (Supports_MS_Emergency [1bit]: Supports_MS_Emergency=1이면, 싱크 장치는 긴급 경고 오디오 채널을 수신하고, 처리하는 것을 지원한다. Supports_MS_Emergency=0이면, 싱크 장치는 이러한 특징을 지원하지 않는다.Emergency Channel Field (Supports_MS_Emergency [1bit]: If Supports_MS_Emergency = 1, the sink device supports receiving and processing an emergency alert audio channel. If Supports_MS_Emergency = 0, the sink device does not support this feature.
오디오 믹스 필드(Supports_MS_Mix) [1bit]: Supports_MS_Mix=1이면, 싱크 장치는 메인 오디오와 보조 오디오(supplementary audio)를 합성하는 것을 지원한다. Supports_MS_Mix=0이면 싱크 장치는 이러한 합성을 지원하지 않고, 믹스된 오디오를 재생하는 것만 지원한다. Audio Mix Field (Supports_MS_Mix) [1bit]: If Supports_MS_Mix=1, the sink device supports combining main audio and supplementary audio. If Supports_MS_Mix=0, the sink device does not support this synthesis and only supports playing mixed audio.
보조 오디오 지원 필드(Supports_MS_Supple) [1bit]: Supports_MS_Supple =1이면, 싱크 장치는 시각/청각 장애인을 위한 보조 오디오 트랙을 갖는 멀티 스트림 오디오를 지원한다. Supports_MS_Supple =0이면, 아무 것도 나타내지 않거나 싱크 장치가 시각/청각 장애인을 위한 보조 오디오 트랙을 지원하지 않음을 나타낸다. Auxiliary Audio Support Field (Supports_MS_Supple) [1bit]: If Supports_MS_Supple =1, the sink device supports multi-stream audio having an auxiliary audio track for the visual/deaf. If Supports_MS_Supple = 0, it indicates nothing or indicates that the sink device does not support the auxiliary audio track for the visual/deaf.
언어 지원 필드(Supports_MS_Lang) [1bit]: Supports_MS_Lang=1이면, 싱크 장치는 여러 언어 오디오 스트림을 갖는 멀티 스트림 오디오를 지원한다. Supports_MS_Lang=0이면, 아무 것도 나타내지 않거나 싱크 장치가 여러 언어 오디오 스트림을 지원하지 않음을 나타낸다.Language Support Field (Supports_MS_Lang) [1bit]: If Supports_MS_Lang=1, the sink device supports multi-stream audio having multiple language audio streams. If Supports_MS_Lang=0, nothing is indicated or it indicates that the sink device does not support multiple language audio streams.
멀티뷰 오디오 지원 필드(Supports_MS_MultiView) [1bit]: Supports_MS_MultiView=1이면, 싱크 장치는 멀티뷰 비디오 스트리밍을 위한 멀티 스트림 오디오를 지원한다. Supports_MS_MultiView=0이면, 아무 것도 나타내지 않거나 싱크 장치가 멀티뷰 비디오 스트리밍을 위한 멀티 스트림 오디오를 지원하지 않음을 나타낸다. Multi-view audio support field (Supports_MS_MultiView) [1bit]: If Supports_MS_MultiView=1, the sink device supports multi-stream audio for multi-view video streaming. If Supports_MS_MultiView=0, nothing is indicated or it indicates that the sink device does not support multi-stream audio for multi-view video streaming.
최대 스트림 카운트 필드(Max_Stream_Count-1) [2bits]: 싱크 장치가 핸들링할 수 있는 최대 오디오 스트림의 개수를 나타낸다. Max_Stream_Count-1값이 아래의 테이블에 도시된다. Maximum stream count field (Max_Stream_Count-1) [2bits]: Indicates the maximum number of audio streams that the sink device can handle. The value of Max_Stream_Count-1 is shown in the table below.
오디오 디스크립터 개수 필드(NUM_HDMI_3D_AD) [3bits]: 3D 오디오 디스크립터의 개수를 나타낸다.Number of audio descriptors field (NUM_HDMI_3D_AD) [3bits]: indicates the number of 3D audio descriptors.
< Table 58 - Max_Stream_Count-1 field>
<Table 58-Max_Stream_Count-1 field>
도 13은, 본 발명의 또 다른 실시 예에 따른 데이터 송수신 시스템(1000-3)의 구성을 도시한 블록도이다.13 is a block diagram showing the configuration of a data transmission/reception system 1000-3 according to another embodiment of the present invention.
도 13을 참조하면, 본 발명의 또 다른 실시 예에 따른 데이터 송수신 시스템(1000-3)은, 데이터 전송 장치(100-3)와, 데이터 수신 장치(200-3)를 포함한다.Referring to FIG. 13, a data transmission/reception system 1000-3 according to another embodiment of the present invention includes a data transmission device 100-3 and a data reception device 200-3.
데이터 전송 장치(100-3)는, 오디오 데이터에 관하여 싱크 장치에 의해 지원되는 특징 정보를 포함하는 디스플레이 식별 정보를 생성하여 데이터 수신 장치(200-3)로 전송한다. The data transmission device 100-3 generates display identification information including feature information supported by the sink device with respect to the audio data and transmits it to the data reception device 200-3.
데이터 수신 장치(200-3)는, 상기 데이터 전송 장치(100-3)로부터 상기 디스플레이 식별 정보를 수신하여 분석한다. 이때, 상기 디스플레이 식별 정보는, 상기 싱크 장치가 지원하는 메인 오디오 및 보조 오디오의 특성에 대한 정보를 나타내는 메인/보조 오디오 특성 필드를 포함한다.The data receiving device 200-3 receives and analyzes the display identification information from the data transmission device 100-3. In this case, the display identification information includes a main/auxiliary audio characteristic field indicating information on characteristics of main audio and auxiliary audio supported by the sink device.
이하에서는, 데이터 전송 장치(100-3)와 데이터 수신 장치(200-3)를 좀 더 상세하게 설명한다. Hereinafter, the data transmission device 100-3 and the data reception device 200-3 will be described in more detail.
도 14는 본 발명의 또 다른 실시 예에 따른 데이터 전송 장치(100-3)의 구성을 도시한 블록도이다.14 is a block diagram showing the configuration of a data transmission device 100-3 according to another embodiment of the present invention.
도 14를 참조하면, 본 발명의 또 다른 실시 예에 따른 데이터 전송 장치(100-3)는, 생성부(130)와 전송부(120)를 포함한다. Referring to FIG. 14, a data transmission device 100-3 according to another embodiment of the present invention includes a
생성부(130)는, 오디오 데이터에 관하여 싱크 장치에 의해 지원되는 특징 정보를 포함하는 디스플레이 식별 정보를 생성하는 구성이다. The
전송부(120)는, 데이터 수신 장치(200-3)에 상기 디스플레이 식별 정보를 전송한다. The
이때, 상기 디스플레이 식별 정보는, 상기 싱크 장치가 지원하는 메인 오디오 및 보조 오디오의 특성에 대한 정보를 나타내는 메인/보조 오디오 특성 필드를 포함한다. In this case, the display identification information includes a main/auxiliary audio characteristic field indicating information on characteristics of main audio and auxiliary audio supported by the sink device.
이때, 상기 메인/보조 오디오 특성 필드는, 상기 싱크 장치가 메인 오디오와 보조 오디오의 합성을 지원하는지 나타내는 오디오 믹스 필드(Audio Mix Field), 상기 싱크 장치가 보조 오디오를 지원하는지 나타내는 보조 오디오 지원 필드(Supplemental Audio Support Field), 상기 싱크 장치가 복수의 언어로 된 오디오 데이터를 지원하는지를 나타내는 언어 지원 필드(Language Support Field), 상기 싱크 장치가 멀티뷰 콘텐츠를 위한 멀티 스트림 오디오 데이터를 지원하는지를 나타내는 멀티뷰 오디오 지원 필드(Multiview Audio Support Field), 상기 싱크 장치가 핸들링할 수 있는 최대 오디오 스트림의 개수를 나타내는 최대 스트림 카운트 필드(Maximum Stream Count Field), 및 3D 오디오 디스크립터의 개수를 나타내는 오디오 디스크립터 개수 필드(Number Of Audio Descriptor Field) 중 적어도 하나를 포함할 수 있다. In this case, the main/auxiliary audio characteristic field includes an audio mix field indicating whether the sink device supports synthesis of main audio and auxiliary audio, and an auxiliary audio support field indicating whether the sink device supports auxiliary audio ( Supplemental Audio Support Field), a language support field indicating whether the sink device supports audio data in a plurality of languages, a multi-view audio indicating whether the sink device supports multi-stream audio data for multi-view content A multiview audio support field, a maximum stream count field indicating the number of maximum audio streams that the sink device can handle, and an audio descriptor number field indicating the number of 3D audio descriptors (Number Of Audio Descriptor Field).
또한, 상기 디스플레이 식별 정보는, 상기 싱크 장치가 긴급 상황 방송 수신 및 처리를 지원하는지를 나타내는 긴급 채널 필드(Emergency Channel Field)를 더 포함할 수 있다. In addition, the display identification information may further include an emergency channel field indicating whether the sink device supports emergency broadcast reception and processing.
도 15는 본 발명의 또 다른 실시 예에 따른 데이터 수신 장치(200-3)의 구성을 도시한 블록도이다.15 is a block diagram showing a configuration of a data receiving apparatus 200-3 according to another embodiment of the present invention.
도 15를 참조하면, 본 발명의 또 다른 실시 예에 따른 데이터 수신 장치(200-3)는, 수신부(210)와, 분석부(230)를 포함한다. Referring to FIG. 15, a data receiving device 200-3 according to another embodiment of the present invention includes a receiving
수신부(210)는, 데이터 전송 장치(100-3)로부터, 오디오 데이터에 관하여 싱크 장치에 의해 지원되는 특징 정보를 포함하는 디스플레이 식별 정보를 수신하는 구성이다. The receiving
분석부(230)는, 상기 수신된 디스플레이 식별 정보를 분석한다. The
이때, 상기 디스플레이 식별 정보는, 상기 싱크 장치가 지원하는 메인 오디오 및 보조 오디오의 특성에 대한 정보를 나타내는 메인/보조 오디오 특성 필드를 포함한다. In this case, the display identification information includes a main/auxiliary audio characteristic field indicating information on characteristics of main audio and auxiliary audio supported by the sink device.
또한, 상기 메인/보조 오디오 특성 필드는, 상기 싱크 장치가 메인 오디오와 보조 오디오의 합성을 지원하는지 나타내는 오디오 믹스 필드(Audio Mix Field), 상기 싱크 장치가 보조 오디오를 지원하는지 나타내는 보조 오디오 지원 필드(Supplemental Audio Support Field), 상기 싱크 장치가 복수의 언어로 된 오디오 데이터를 지원하는지를 나타내는 언어 지원 필드(Language Support Field), 상기 싱크 장치가 멀티뷰 콘텐츠를 위한 멀티 스트림 오디오 데이터를 지원하는지를 나타내는 멀티뷰 오디오 지원 필드(Multiview Audio Support Field), 상기 싱크 장치가 핸들링할 수 있는 최대 오디오 스트림의 개수를 나타내는 최대 스트림 카운트 필드(Maximum Stream Count Field), 및 3D 오디오 디스크립터의 개수를 나타내는 오디오 디스크립터 개수 필드(Number Of Audio Descriptor Field) 중 적어도 하나를 포함할 수 있다. In addition, the main/auxiliary audio characteristic field includes an audio mix field indicating whether the sink device supports synthesis of main audio and auxiliary audio, and an auxiliary audio support field indicating whether the sink device supports auxiliary audio ( Supplemental Audio Support Field), a language support field indicating whether the sink device supports audio data in a plurality of languages, a multi-view audio indicating whether the sink device supports multi-stream audio data for multi-view content A multiview audio support field, a maximum stream count field indicating the number of maximum audio streams that the sink device can handle, and an audio descriptor number field indicating the number of 3D audio descriptors (Number Of Audio Descriptor Field).
또한, 상기 디스플레이 식별 정보는, 상기 싱크 장치가 긴급 상황 방송 수신 및 처리를 지원하는지를 나타내는 긴급 채널 필드(Emergency Channel Field)를 더 포함할 수 있다.
In addition, the display identification information may further include an emergency channel field indicating whether the sink device supports emergency broadcast reception and processing.
한편, 본 발명의 다양한 실시 예에 따른 유선 인터페이스는 쿼드 뷰 콘텐츠 전송을 지원할 수 있다. 쿼드 뷰 전송을 위해 HDMI 유선 인터페이스 규격의 3D 비디오 포맷 규격을 활용할 수 있다.Meanwhile, a wired interface according to various embodiments of the present disclosure may support quad-view content transmission. For quad-view transmission, the 3D video format standard of the HDMI wired interface standard can be used.
도 16a 내지 16c는 쿼드 뷰 비디오 콘텐츠를 3D 인터레이스 포맷으로 전송하는 경우 다양한 데이터 전송 포맷을 도시한 도면이다.16A to 16C are diagrams illustrating various data transmission formats when quad-view video content is transmitted in a 3D interlace format.
또한, 이 경우 밴더 특정 인포프레임(Vendor-Specific Infoframe)과 밴더 특정 데이터 블록(Vendor-specific Data Block)을 수정할 수 있다. 구체적으로 종래의 3D 듀얼뷰를 정의하는 필드를 리저브 영역까지 확장한다. Also, in this case, a vendor-specific infoframe and a vendor-specific data block may be modified. Specifically, the field defining the conventional 3D dual view is extended to the reserve area.
< Table 59 ? VSIF(Packet Body)><Table 59? VSIF(Packet Body)>
< Table 60 ? NUM_VIEWS(Rsvd + 3D_DualView)><Table 60? NUM_VIEWS(Rsvd + 3D_DualView)>
< Table 61 ? VSDB>
<Table 61? VSDB>
이하에서는 본 발명의 다양한 실시 예에 따른, 데이터 송수신 방법을 설명한다. Hereinafter, a method of transmitting and receiving data according to various embodiments of the present disclosure will be described.
도 17은 본 발명의 일 실시 예에 따른 데이터 전송 방법의 흐름도이다.17 is a flowchart of a data transmission method according to an embodiment of the present invention.
도 17을 참조하면, 본 발명의 일 실시 예에 따른 데이터 전송 방법은, 제1 서브 패킷 및 제2 서브 패킷 포함하는 패킷을 생성하는 단계(S1710)와, 상기 생성된 패킷을 데이터 수신 장치로 전송하는 단계(S1720)를 포함하고, 상기 제1 서브 패킷 및 상기 제2 서브 패킷은 제1 콘텐츠에 대한 상이한 오디오 데이터를 포함한다. Referring to FIG. 17, a data transmission method according to an embodiment of the present invention includes generating a packet including a first sub-packet and a second sub-packet (S1710), and transmitting the generated packet to a data receiving device. A step S1720, wherein the first sub-packet and the second sub-packet include different audio data for the first content.
이때, 상기 제1 서브 패킷은 비장애인을 위한 오디오 데이터를 포함하고, 상기 제2 서브 패킷은 시각 장애인을 위한 오디오 데이터를 포함할 수 있다.In this case, the first sub-packet may include audio data for a non-disabled person, and the second sub-packet may include audio data for a visually impaired person.
또한, 상기 제1 서브 패킷 및 상기 제2 서브 패킷은 상이한 언어로 된 오디오 데이터를 포함할 수 있다.In addition, the first sub-packet and the second sub-packet may include audio data in different languages.
또한, 상기 제1 서브 패킷은 상기 제2 서브 패킷에 대한 오디오 디스크립션에 해당하는 오디오 데이터를 포함할 수 있다.Also, the first subpacket may include audio data corresponding to an audio description of the second subpacket.
또한, 상기 패킷은, 상기 제1 콘텐츠와 상이한 제2 콘텐츠에 대한 오디오 데이터를 포함하는 제3 서브 패킷을 더 포함할 수 있다.In addition, the packet may further include a third sub-packet including audio data for second content different from the first content.
이때, 상기 제1 서브 패킷이 포함하는 오디오 데이터는 상기 제1 콘텐츠에 대한 전용 오디오 데이터이고, 상기 제3 서브 패킷이 포함하는 오디오 데이터는 상기 제2 콘텐츠에 대한 전용 오디오 데이터이며, 상기 제2 서브 패킷이 포함하는 오디오 데이터는, 상기 제1 콘텐츠 및 상기 제2 콘텐츠에 대한 공통 오디오 데이터일 수 있다.At this time, the audio data included in the first subpacket is dedicated audio data for the first content, the audio data included in the third subpacket is dedicated audio data for the second content, and the second subpacket The audio data included in the packet may be common audio data for the first content and the second content.
또한, 상기 패킷은, 상기 제2 콘텐츠에 대한 오디오 데이터를 포함하는 제4 서브 패킷을 더 포함하고, 상기 제3 서브 패킷과 상기 제4 서브 패킷은 상이한 오디오 데이터를 포함할 수 있다.Also, the packet may further include a fourth sub-packet including audio data for the second content, and the third sub-packet and the fourth sub-packet may include different audio data.
도 18은 본 발명의 일 실시 예에 따른 데이터 수신 방법의 흐름도이다.18 is a flowchart of a method for receiving data according to an embodiment of the present invention.
도 18을 참조하면, 본 발명의 일 다른 실시 예에 따른, 데이터 수신 방법은, 데이터 전송 장치로부터 제1 서브 패킷 및 제2 서브 패킷 포함하는 패킷을 수신하는 단계(S1810)와, 상기 수신된 제1 서브 패킷 및 상기 제2 서브 패킷을 파싱하는 단계(S1820)를 포함하고, 상기 제1 서브 패킷 및 상기 제2 서브 패킷은 제1 콘텐츠에 대한 상이한 오디오 데이터를 포함한다.Referring to FIG. 18, according to another embodiment of the present invention, a method for receiving data includes receiving a packet including a first subpacket and a second subpacket from a data transmission device (S1810), and Parsing the first sub-packet and the second sub-packet (S1820), wherein the first sub-packet and the second sub-packet include different audio data for first content.
또한, 상기 제1 서브 패킷은 비장애인을 위한 오디오 데이터를 포함하고, 상기 제2 서브 패킷은 시각 장애인을 위한 오디오 데이터를 포함할 수 있다.In addition, the first sub-packet may include audio data for a non-disabled person, and the second sub-packet may include audio data for a visually impaired person.
또한, 상기 제1 서브 패킷 및 상기 제2 서브 패킷은 상이한 언어로 된 오디오 데이터를 포함할 수 있다.In addition, the first sub-packet and the second sub-packet may include audio data in different languages.
이때, 상기 제1 서브 패킷은 상기 제2 서브 패킷에 대한 오디오 디스크립션에 해당하는 오디오 데이터를 포함할 수 있다.In this case, the first sub-packet may include audio data corresponding to an audio description of the second sub-packet.
또한, 상기 패킷은, 상기 제1 콘텐츠와 상이한 제2 콘텐츠에 대한 오디오 데이터를 포함하는 제3 서브 패킷을 더 포함할 수 있다.In addition, the packet may further include a third sub-packet including audio data for second content different from the first content.
이때, 상기 제1 서브 패킷이 포함하는 오디오 데이터는 상기 제1 콘텐츠에 대한 전용 오디오 데이터이고, 상기 제3 서브 패킷이 포함하는 오디오 데이터는 상기 제2 콘텐츠에 대한 전용 오디오 데이터이며, 상기 제2 서브 패킷이 포함하는 오디오 데이터는, 상기 제1 콘텐츠 및 상기 제2 콘텐츠에 대한 공통 오디오 데이터일 수 있다.At this time, the audio data included in the first subpacket is dedicated audio data for the first content, the audio data included in the third subpacket is dedicated audio data for the second content, and the second subpacket The audio data included in the packet may be common audio data for the first content and the second content.
또한, 상기 패킷은, 상기 제2 콘텐츠에 대한 오디오 데이터를 포함하는 제4 서브 패킷을 더 포함하고, 상기 제3 서브 패킷과 상기 제4 서브 패킷은 상이한 오디오 데이터를 포함할 수 있다.Also, the packet may further include a fourth sub-packet including audio data for the second content, and the third sub-packet and the fourth sub-packet may include different audio data.
도 19는 본 발명의 다른 실시 예에 따른 데이터 전송 방법의 흐름도이다.19 is a flowchart of a data transmission method according to another embodiment of the present invention.
도 19를 참조하면, 본 발명의 다른 실시 예에 따른, 오디오 메타 데이터 패킷을 생성하는 단계(S1910)와, 상기 생성된 오디오 메타 데이터 패킷을 데이터 수신 장치로 전송하는 단계(S1920)를 포함하고, 상기 생성된 오디오 메타 데이터 패킷의 헤더(header)는, 3D 오디오 샘플 패킷의 전송여부를 나타내는 3D 오디오 필드(3D Audio Field)를 포함한다.Referring to FIG. 19, according to another embodiment of the present invention, generating an audio metadata packet (S1910) and transmitting the generated audio metadata packet to a data receiving device (S1920), The header of the generated audio metadata packet includes a 3D audio field indicating whether or not a 3D audio sample packet is transmitted.
또한, 상기 생성된 오디오 메타 데이터 패킷의 헤더는, 전송되는 오디오 스트림의 개수 정보를 나타내는 오디오 스트림 개수 필드(Number Of Audio Stream Field)를 더 포함할 수 있다.In addition, the header of the generated audio metadata packet may further include a Number Of Audio Stream Field indicating information on the number of transmitted audio streams.
또한, 상기 생성된 오디오 메타 데이터 패킷의 헤더는, 전송되는 상이한 콘텐츠의 개수 정보를 나타내는 뷰 개수 필드(Number Of Views Field)를 더 포함할 수 있다.In addition, the header of the generated audio metadata packet may further include a Number Of Views Field indicating information on the number of different contents to be transmitted.
또한, 상기 생성된 오디오 메타 데이터 패킷의 페이로드(payload)는, 멀티 스트림 오디오 샘플 패킷(Multi-stream Audio Sample Packet) 또는 멀티 스트림 원비트 오디오 샘플 패킷(Multi-stream One Bit Audio Sample Packet)의 서브패킷에 대한 메타 데이터를 나타내는 오디오 메타 데이터 디스크립터 필드를 포함할 수 있다.In addition, the payload of the generated audio meta data packet is a sub of a multi-stream audio sample packet or a multi-stream one bit audio sample packet. It may include an audio metadata descriptor field indicating metadata about a packet.
또한, 상기 오디오 메타 데이터 디스크립터 필드는, 긴급 상황 방송이 있는지를 나타내는 긴급 채널 필드(Emergency Channel Field), 멀티 뷰에서 좌안 또는 우안 영상에 대응되는 오디오 데이터를 포함하는지를 나타내는 멀티뷰 필드(Multivew Field), 오디오 데이터에 대한 언어의 식별 유무를 나타내는 언어 코드 유효 필드(Language Code Valid Field), 보조 오디오 데이터 유무를 나타내는 보조 오디오 유효 필드(Supplemental Audio Valid Field), 메인 오디오 데이터와 상기 보조 오디오 데이터의 프리 믹스 여부를 나타내는 프리믹스 보조 오디오 필드(pre-mixed Supplemental Audio Field), 상기 보조 오디오 데이터의 타입을 나타내는 보조 오디오 타입 필드(Supplemental Audio Type Field), 및 오디오 데이터에 대한 언어 코드를 나타내는 언어 코드 필드(Language Code Field) 중 적어도 하나를 포함할 수 있다.In addition, the audio metadata descriptor field includes an emergency channel field indicating whether there is an emergency broadcast, a multi-view field indicating whether audio data corresponding to a left-eye or right-eye image is included in a multi-view, A language code valid field indicating the presence or absence of a language for audio data, a supplemental audio valid field indicating the presence or absence of auxiliary audio data, whether the main audio data and the auxiliary audio data are premixed A pre-mixed supplemental audio field indicating a pre-mixed supplemental audio field, a supplemental audio type field indicating a type of the auxiliary audio data, and a language code field indicating a language code for audio data. ) May include at least one of.
도 20은 본 발명의 다른 실시 예에 따른 데이터 수신 방법의 흐름도이다.20 is a flowchart of a data reception method according to another embodiment of the present invention.
도 20을 참조하면, 본 발명의 다른 실시 예에 따른, 데이터 수신 방법은, 데이터 전송 장치로부터 오디오 메타 데이터 패킷을 수신하는 단계(S2010)와, 상기 수신된 오디오 메타 데이터 패킷을 파싱하는 단계(S2020)를 포함하고, 상기 수신된 오디오 메타 데이터 패킷의 헤더(header)는, 3D 오디오 샘플 패킷의 전송여부를 나타내는 3D 오디오 필드(3D Audio Field)를 포함한다.Referring to FIG. 20, according to another embodiment of the present invention, a data receiving method includes receiving an audio metadata packet from a data transmission device (S2010) and parsing the received audio metadata packet (S2020). ), and the header of the received audio metadata packet includes a 3D audio field indicating whether to transmit a 3D audio sample packet.
또한, 상기 오디오 메타 데이터 패킷의 헤더는, 수신되는 오디오 스트림의 개수 정보를 나타내는 오디오 스트림 개수 필드(Number Of Audio Stream Field)를 더 포함할 수 있다. In addition, the header of the audio metadata packet may further include a Number Of Audio Stream Field indicating information on the number of received audio streams.
또한, 상기 오디오 메타 데이터 패킷의 헤더는, 수신되는 상이한 콘텐츠의 개수 정보를 나타내는 뷰 개수 필드(Number Of Views Field)를 더 포함할 수 있다.In addition, the header of the audio metadata packet may further include a Number Of Views Field indicating information on the number of different contents to be received.
또한, 상기 오디오 메타 데이터 패킷의 페이로드(payload)는, 멀티 스트림 오디오 샘플 패킷(Multi-stream Audio Sample Packet) 또는 멀티 스트림 원비트 오디오 샘플 패킷(Multi-stream One Bit Audio Sample Packet)의 서브패킷에 대한 메타 데이터를 나타내는 오디오 메타 데이터 디스크립터 필드를 포함할 수 있다.In addition, the payload of the audio meta data packet is a subpacket of a multi-stream audio sample packet or a multi-stream one bit audio sample packet. It may include an audio meta data descriptor field indicating meta data for the data.
또한, 상기 오디오 메타 데이터 디스크립터 필드는, 긴급 상황 방송이 있는지를 나타내는 긴급 채널 필드(Emergency Channel Field), 멀티 뷰에서 좌안 또는 우안 영상에 대응되는 오디오 데이터를 포함하는지를 나타내는 멀티뷰 필드(Multivew Field), 오디오 데이터에 대한 언어의 식별 유무를 나타내는 언어 코드 유효 필드(Language Code Valid Field), 보조 오디오 데이터 유무를 나타내는 보조 오디오 유효 필드(Supplemental Audio Valid Field), 메인 오디오 데이터와 상기 보조 오디오 데이터의 프리 믹스 여부를 나타내는 프리믹스 보조 오디오 필드(pre-mixed Supplemental Audio Field), 상기 보조 오디오 데이터의 타입을 나타내는 보조 오디오 타입 필드(Supplemental Audio Type Field), 및 오디오 데이터에 대한 언어 코드를 나타내는 언어 코드 필드(Language Code Field) 중 적어도 하나를 포함할 수 있다.In addition, the audio metadata descriptor field includes an emergency channel field indicating whether there is an emergency broadcast, a multi-view field indicating whether audio data corresponding to a left-eye or right-eye image is included in a multi-view, A language code valid field indicating the presence or absence of a language for audio data, a supplemental audio valid field indicating the presence or absence of auxiliary audio data, whether the main audio data and the auxiliary audio data are premixed A pre-mixed supplemental audio field indicating a pre-mixed supplemental audio field, a supplemental audio type field indicating a type of the auxiliary audio data, and a language code field indicating a language code for audio data. ) May include at least one of.
도 21은 본 발명의 또 다른 실시 예에 따른 데이터 전송 방법의 흐름도이다.21 is a flowchart of a data transmission method according to another embodiment of the present invention.
도 21을 참조하면, 본 발명의 또 다른 실시 예에 따른, 데이터 전송 방법은, 오디오 데이터에 관하여 싱크 장치에 의해 지원되는 특징 정보를 포함하는 디스플레이 식별 정보를 생성하는 단계(S2110)와, 데이터 수신 장치에 상기 디스플레이 식별 정보를 전송하는 단계(S2120)를 포함하고, 상기 디스플레이 식별 정보는, 상기 싱크 장치가 지원하는 메인 오디오 및 보조 오디오의 특성에 대한 정보를 나타내는 메인/보조 오디오 특성 필드를 포함한다.Referring to FIG. 21, in a data transmission method according to another embodiment of the present invention, generating display identification information including feature information supported by a sink device with respect to audio data (S2110) and receiving data Transmitting the display identification information to a device (S2120), wherein the display identification information includes a main/secondary audio characteristic field indicating information on characteristics of main audio and auxiliary audio supported by the sink device. .
또한, 상기 메인/보조 오디오 특성 필드는, 상기 싱크 장치가 메인 오디오와 보조 오디오의 합성을 지원하는지 나타내는 오디오 믹스 필드(Audio Mix Field), 상기 싱크 장치가 보조 오디오를 지원하는지 나타내는 보조 오디오 지원 필드(Supplemental Audio Support Field), 상기 싱크 장치가 복수의 언어로 된 오디오 데이터를 지원하는지를 나타내는 언어 지원 필드(Language Support Field), 상기 싱크 장치가 멀티뷰 콘텐츠를 위한 멀티 스트림 오디오 데이터를 지원하는지를 나타내는 멀티뷰 오디오 지원 필드(Multiview Audio Support Field), 상기 싱크 장치가 핸들링할 수 있는 최대 오디오 스트림의 개수를 나타내는 최대 스트림 카운트 필드(Maximum Stream Count Field), 및 3D 오디오 디스크립터의 개수를 나타내는 오디오 디스크립터 개수 필드(Number Of Audio Descriptor Field) 중 적어도 하나를 포함할 수 있다.In addition, the main/auxiliary audio characteristic field includes an audio mix field indicating whether the sink device supports synthesis of main audio and auxiliary audio, and an auxiliary audio support field indicating whether the sink device supports auxiliary audio ( Supplemental Audio Support Field), a language support field indicating whether the sink device supports audio data in a plurality of languages, a multi-view audio indicating whether the sink device supports multi-stream audio data for multi-view content A multiview audio support field, a maximum stream count field indicating the number of maximum audio streams that the sink device can handle, and an audio descriptor number field indicating the number of 3D audio descriptors (Number Of Audio Descriptor Field).
또한, 상기 디스플레이 식별 정보는, 상기 싱크 장치가 긴급 상황 방송 수신 및 처리를 지원하는지를 나타내는 긴급 채널 필드(Emergency Channel Field)를 더 포함할 수 있다.In addition, the display identification information may further include an emergency channel field indicating whether the sink device supports emergency broadcast reception and processing.
도 22는 본 발명의 또 다른 실시 예에 따른 데이터 수신 방법의 흐름도이다.22 is a flowchart of a data receiving method according to another embodiment of the present invention.
도 22를 참조하면, 본 발명의 또 다른 실시 예에 따른 데이터 수신 방법은, 데이터 전송 장치로부터, 오디오 데이터에 관하여 싱크 장치에 의해 지원되는 특징 정보를 포함하는 디스플레이 식별 정보를 수신하는 단계(S2210)와, 상기 수신된 디스플레이 식별 정보를 분석하는 단계(S2220)를 포함하고, 상기 디스플레이 식별 정보는, 상기 싱크 장치가 지원하는 메인 오디오 및 보조 오디오의 특성에 대한 정보를 나타내는 메인/보조 오디오 특성 필드를 포함한다.Referring to FIG. 22, in a data receiving method according to another embodiment of the present invention, receiving display identification information including feature information supported by a sink device with respect to audio data from a data transmission device (S2210) And, analyzing the received display identification information (S2220), wherein the display identification information includes a main/secondary audio characteristic field indicating information on characteristics of main audio and auxiliary audio supported by the sink device. Include.
또한, 상기 메인/보조 오디오 특성 필드는, 상기 싱크 장치가 메인 오디오와 보조 오디오의 합성을 지원하는지 나타내는 오디오 믹스 필드(Audio Mix Field), 상기 싱크 장치가 보조 오디오를 지원하는지 나타내는 보조 오디오 지원 필드(Supplemental Audio Support Field), 상기 싱크 장치가 복수의 언어로 된 오디오 데이터를 지원하는지를 나타내는 언어 지원 필드(Language Support Field), 상기 싱크 장치가 멀티뷰 콘텐츠를 위한 멀티 스트림 오디오 데이터를 지원하는지를 나타내는 멀티뷰 오디오 지원 필드(Multiview Audio Support Field), 상기 싱크 장치가 핸들링할 수 있는 최대 오디오 스트림의 개수를 나타내는 최대 스트림 카운트 필드(Maximum Stream Count Field), 및 3D 오디오 디스크립터의 개수를 나타내는 오디오 디스크립터 개수 필드(Number Of Audio Descriptor Field) 중 적어도 하나를 포함할 수 있다.In addition, the main/auxiliary audio characteristic field includes an audio mix field indicating whether the sink device supports synthesis of main audio and auxiliary audio, and an auxiliary audio support field indicating whether the sink device supports auxiliary audio ( Supplemental Audio Support Field), a language support field indicating whether the sink device supports audio data in a plurality of languages, a multi-view audio indicating whether the sink device supports multi-stream audio data for multi-view content A multiview audio support field, a maximum stream count field indicating the number of maximum audio streams that the sink device can handle, and an audio descriptor number field indicating the number of 3D audio descriptors (Number Of Audio Descriptor Field).
또한, 상기 디스플레이 식별 정보는, 상기 싱크 장치가 긴급 상황 방송 수신 및 처리를 지원하는지를 나타내는 긴급 채널 필드(Emergency Channel Field)를 더 포함할 수 있다.In addition, the display identification information may further include an emergency channel field indicating whether the sink device supports emergency broadcast reception and processing.
이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어서는 안될 것이다.In the above, preferred embodiments of the present invention have been illustrated and described, but the present invention is not limited to the specific embodiments described above, and is generally used in the technical field to which the present invention belongs without departing from the gist of the present invention claimed in the claims. Various modifications are possible by those skilled in the art of course, and these modifications should not be individually understood from the technical idea or perspective of the present invention.
1000-1, 1000-2, 1000-3 : 데이터 송수신 시스템
100-1, 100-2, 100-3 : 데이터 전송 장치
200-1, 200-2, 200-3 : 데이터 수신 장치
110 : 패킷 생성부 120 : 전송부
130 : 생성부
210 : 수신부 220 : 파싱부
230 : 분석부1000-1, 1000-2, 1000-3: data transmission/reception system
100-1, 100-2, 100-3: data transmission device
200-1, 200-2, 200-3: data receiving device
110: packet generation unit 120: transmission unit
130: generation unit
210: receiving unit 220: parsing unit
230: analysis unit
Claims (39)
제1 서브 패킷 및 제2 서브 패킷 포함하는 패킷을 오디오 스트림마다 생성하는 패킷 생성부; 및
상기 생성된 패킷을 데이터 수신 장치로 전송하는 전송부;를 포함하고,
상기 제1 서브 패킷 및 상기 제2 서브 패킷은 제1 콘텐츠에 대한 상이한 오디오 데이터를 포함하고,
상기 패킷은 헤더와 페이로드를 포함하고,
상기 헤더는 상기 오디오 스트림에 포함되는 패킷의 순서를 나타내는 시퀀스 번호 필드 및 서브 패킷을 식별하는 프레즌트 필드를 포함하고,
상기 페이로드는 오디오 타입 정보 필드를 포함하고,
상기 오디오 타입 정보 필드는 보조 오디오 타입 프레즌트 필드, 보조 오디오 타입 필드, 믹스 오디오 필드 및 유효 언어 코드 필드를 포함하며,
상기 보조 오디오 타입 프레즌트 필드는 오디오 데이터의 보조 오디오가 존재하는지 여부를 나타내고,
상기 보조 오디오 타입 필드는 상기 복수의 서브 패킷들 각각에 포함된 오디오 데이터에 대한 보조 오디오의 타입을 나타내며,
상기 믹스 오디오 필드는 메인 오디오 데이터와 보조 오디오 데이터가 프리 믹스되는지 여부를 나타내는 1 비트의 필드이고,
상기 유효 언어 코드 필드는 상기 오디오 데이터의 유효한 언어가 있는지 여부를 나타내는 1 비트의 필드이며,
상기 보조 오디오 타입 프레즌트 필드가 기 설정된 제1 값으로 설정되면 상기 보조 오디오 타입 프레즌트 필드는 보조 오디오 타입 필드를 포함하고, 상기 보조 오디오 타입 프레즌트 필드가 기 설정된 제2 값으로 설정되면 상기 보조 오디오 타입 필드는 무시되며,
상기 믹스 오디오 필드가 기 설정된 제1 값으로 설정되면 상기 오디오 데이터는 상기 메인 오디오 및 상기 보조 오디오가 프리 믹스된 스트림을 포함하며,
상기 유효 언어 코드 필드가 기 설정된 제1 값으로 설정되면, 상기 오디오 데이터는 언어 코드 필드를 포함하는 데이터 전송장치.In the data transmission device,
A packet generator for generating a packet including a first sub packet and a second sub packet for each audio stream; And
Includes; a transmission unit for transmitting the generated packet to the data receiving device,
The first sub-packet and the second sub-packet contain different audio data for first content,
The packet includes a header and a payload,
The header includes a sequence number field indicating an order of packets included in the audio stream and a present field identifying a sub packet,
The payload includes an audio type information field,
The audio type information field includes an auxiliary audio type present field, an auxiliary audio type field, a mixed audio field, and a valid language code field,
The auxiliary audio type present field indicates whether auxiliary audio of audio data exists,
The auxiliary audio type field indicates a type of auxiliary audio for audio data included in each of the plurality of subpackets,
The mixed audio field is a 1-bit field indicating whether main audio data and auxiliary audio data are premixed,
The valid language code field is a 1-bit field indicating whether there is a valid language of the audio data,
When the auxiliary audio type present field is set to a preset first value, the auxiliary audio type present field includes an auxiliary audio type field, and when the auxiliary audio type present field is set to a preset second value, the auxiliary audio type present field is set to a preset second value. The audio type field is ignored,
When the mixed audio field is set to a preset first value, the audio data includes a stream in which the main audio and the auxiliary audio are premixed,
When the valid language code field is set to a preset first value, the audio data includes a language code field.
상기 제1 서브 패킷은 비장애인을 위한 오디오 데이터를 포함하고,
상기 제2 서브 패킷은 시각 장애인을 위한 오디오 데이터를 포함하는 것을 특징으로 하는 데이터 전송 장치.The method of claim 1,
The first sub-packet includes audio data for a non-disabled person,
And the second sub-packet includes audio data for the visually impaired.
상기 제1 서브 패킷 및 상기 제2 서브 패킷은 상이한 언어로 된 오디오 데이터를 포함하는 것을 특징으로 하는 데이터 전송 장치.The method of claim 1,
Wherein the first sub-packet and the second sub-packet contain audio data in different languages.
상기 제1 서브 패킷은 상기 제2 서브 패킷에 대한 오디오 디스크립션에 해당하는 오디오 데이터를 포함하는 것을 특징으로 하는 데이터 전송 장치.The method of claim 1,
Wherein the first sub-packet includes audio data corresponding to an audio description for the second sub-packet.
상기 패킷은, 상기 제1 콘텐츠와 상이한 제2 콘텐츠에 대한 오디오 데이터를 포함하는 제3 서브 패킷을 더 포함하는 것을 특징으로 하는 데이터 전송 장치.The method of claim 1,
The packet further comprises a third sub-packet including audio data for a second content different from the first content.
상기 제1 서브 패킷이 포함하는 오디오 데이터는 상기 제1 콘텐츠에 대한 전용 오디오 데이터이고,
상기 제3 서브 패킷이 포함하는 오디오 데이터는 상기 제2 콘텐츠에 대한 전용 오디오 데이터이며,
상기 제2 서브 패킷이 포함하는 오디오 데이터는, 상기 제1 콘텐츠 및 상기 제2 콘텐츠에 대한 공통 오디오 데이터인 것을 특징으로 하는 데이터 전송 장치.The method of claim 5,
The audio data included in the first sub-packet is dedicated audio data for the first content,
The audio data included in the third subpacket is dedicated audio data for the second content,
The audio data included in the second sub packet is common audio data for the first content and the second content.
상기 패킷은, 상기 제2 콘텐츠에 대한 오디오 데이터를 포함하는 제4 서브 패킷을 더 포함하고,
상기 제3 서브 패킷과 상기 제4 서브 패킷은 상이한 오디오 데이터를 포함하는, 데이터 전송 장치.The method of claim 5,
The packet further includes a fourth sub-packet including audio data for the second content,
The data transmission apparatus, wherein the third sub-packet and the fourth sub-packet contain different audio data.
데이터 전송 장치로부터 제1 서브 패킷 및 제2 서브 패킷 포함하는 패킷을 오디오 스트림마다 수신하는 수신부; 및
상기 수신된 제1 서브 패킷 및 상기 제2 서브 패킷을 파싱하는 파싱부;를 포함하고,
상기 제1 서브 패킷 및 상기 제2 서브 패킷은 제1 콘텐츠에 대한 상이한 오디오 데이터를 포함하고,
상기 패킷은 헤더와 페이로드를 포함하고,
상기 헤더는 상기 오디오 스트림에 포함되는 패킷의 순서를 나타내는 시퀀스 번호 필드 및 서브 패킷을 식별하는 프레즌트 필드를 포함하고,
상기 페이로드는 오디오 타입 정보 필드를 포함하고,
상기 오디오 타입 정보 필드는 보조 오디오 타입 프레즌트 필드, 보조 오디오 타입 필드, 믹스 오디오 필드 및 유효 언어 코드 필드를 포함하며,
상기 보조 오디오 타입 프레즌트 필드는 오디오 데이터의 보조 오디오가 존재하는지 여부를 나타내고,
상기 보조 오디오 타입 필드는 상기 복수의 서브 패킷들 각각에 포함된 오디오 데이터에 대한 보조 오디오의 타입을 나타내며,
상기 믹스 오디오 필드는 메인 오디오 데이터와 보조 오디오 데이터가 프리 믹스되는지 여부를 나타내는 1 비트의 필드이고,
상기 유효 언어 코드 필드는 상기 오디오 데이터의 유효한 언어가 있는지 여부를 나타내는 1 비트의 필드이며,
상기 보조 오디오 타입 프레즌트 필드가 기 설정된 제1 값으로 설정되면 상기 보조 오디오 타입 프레즌트 필드는 보조 오디오 타입 필드를 포함하고, 상기 보조 오디오 타입 프레즌트 필드가 기 설정된 제2 값으로 설정되면 상기 보조 오디오 타입 필드는 무시되며,
상기 믹스 오디오 필드가 기 설정된 제1 값으로 설정되면 상기 오디오 데이터는 상기 메인 오디오 및 상기 보조 오디오가 프리 믹스된 스트림을 포함하며,
상기 유효 언어 코드 필드가 기 설정된 제1 값으로 설정되면, 상기 오디오 데이터는 언어 코드 필드를 포함하는 데이터 수신 장치.In the data receiving device,
A receiving unit for receiving a packet including a first sub packet and a second sub packet from the data transmission device for each audio stream; And
Including; a parsing unit for parsing the received first sub-packet and the second sub-packet,
The first sub-packet and the second sub-packet contain different audio data for first content,
The packet includes a header and a payload,
The header includes a sequence number field indicating an order of packets included in the audio stream and a present field identifying a sub packet,
The payload includes an audio type information field,
The audio type information field includes an auxiliary audio type present field, an auxiliary audio type field, a mixed audio field, and a valid language code field,
The auxiliary audio type present field indicates whether auxiliary audio of audio data exists,
The auxiliary audio type field indicates a type of auxiliary audio for audio data included in each of the plurality of subpackets,
The mixed audio field is a 1-bit field indicating whether main audio data and auxiliary audio data are premixed,
The valid language code field is a 1-bit field indicating whether there is a valid language of the audio data,
When the auxiliary audio type present field is set to a preset first value, the auxiliary audio type present field includes an auxiliary audio type field, and when the auxiliary audio type present field is set to a preset second value, the auxiliary audio type present field is set to a preset second value. The audio type field is ignored,
When the mixed audio field is set to a preset first value, the audio data includes a stream in which the main audio and the auxiliary audio are premixed,
When the valid language code field is set to a preset first value, the audio data includes a language code field.
상기 제1 서브 패킷은 비장애인을 위한 오디오 데이터를 포함하고,
상기 제2 서브 패킷은 시각 장애인을 위한 오디오 데이터를 포함하는 것을 특징으로 하는 데이터 수신 장치.The method of claim 8,
The first sub-packet includes audio data for a non-disabled person,
And the second sub-packet includes audio data for the visually impaired.
상기 제1 서브 패킷 및 상기 제2 서브 패킷은 상이한 언어로 된 오디오 데이터를 포함하는 것을 특징으로 하는 데이터 수신 장치.The method of claim 8,
And the first sub-packet and the second sub-packet include audio data in different languages.
상기 제1 서브 패킷은 상기 제2 서브 패킷에 대한 오디오 디스크립션에 해당하는 오디오 데이터를 포함하는 것을 특징으로 하는 데이터 수신 장치.The method of claim 8,
And the first sub-packet includes audio data corresponding to an audio description of the second sub-packet.
상기 패킷은, 상기 제1 콘텐츠와 상이한 제2 콘텐츠에 대한 오디오 데이터를 포함하는 제3 서브 패킷을 더 포함하는 것을 특징으로 하는 데이터 수신 장치.The method of claim 8,
And the packet further includes a third sub-packet including audio data for second content different from the first content.
상기 제1 서브 패킷이 포함하는 오디오 데이터는 상기 제1 콘텐츠에 대한 전용 오디오 데이터이고,
상기 제3 서브 패킷이 포함하는 오디오 데이터는 상기 제2 콘텐츠에 대한 전용 오디오 데이터이며,
상기 제2 서브 패킷이 포함하는 오디오 데이터는, 상기 제1 콘텐츠 및 상기 제2 콘텐츠에 대한 공통 오디오 데이터인 것을 특징으로 하는 데이터 수신 장치.The method of claim 12,
The audio data included in the first sub-packet is dedicated audio data for the first content,
The audio data included in the third subpacket is dedicated audio data for the second content,
The audio data included in the second sub-packet is common audio data for the first content and the second content.
상기 패킷은, 상기 제2 콘텐츠에 대한 오디오 데이터를 포함하는 제4 서브 패킷을 더 포함하고,
상기 제3 서브 패킷과 상기 제4 서브 패킷은 상이한 오디오 데이터를 포함하는, 데이터 수신 장치.The method of claim 12,
The packet further includes a fourth sub-packet including audio data for the second content,
The data receiving apparatus, wherein the third sub-packet and the fourth sub-packet contain different audio data.
제1 서브 패킷 및 제2 서브 패킷을 포함하는 패킷을 오디오 스트림마다 생성하여 데이터 수신 장치로 전송하는 데이터 전송 장치; 및
상기 데이터 전송 장치로부터 상기 패킷을 수신하는 데이터 수신 장치;를 포함하고,
상기 제1 서브 패킷 및 상기 제2 서브 패킷은 제1 콘텐츠에 대한 상이한 오디오 데이터를 포함하고,
상기 패킷은 헤더와 페이로드를 포함하고,
상기 헤더는 상기 오디오 스트림에 포함되는 패킷의 순서를 나타내는 시퀀스 번호 필드 및 서브 패킷을 식별하는 프레즌트 필드를 포함하고,
상기 페이로드는 오디오 타입 정보 필드를 포함하고,
상기 오디오 타입 정보 필드는 보조 오디오 타입 프레즌트 필드, 보조 오디오 타입 필드, 믹스 오디오 필드 및 유효 언어 코드 필드를 포함하며,
상기 보조 오디오 타입 프레즌트 필드는 오디오 데이터의 보조 오디오가 존재하는지 여부를 나타내고,
상기 보조 오디오 타입 필드는 상기 복수의 서브 패킷들 각각에 포함된 오디오 데이터에 대한 보조 오디오의 타입을 나타내며,
상기 믹스 오디오 필드는 메인 오디오 데이터와 보조 오디오 데이터가 프리 믹스되는지 여부를 나타내는 1 비트의 필드이고,
상기 유효 언어 코드 필드는 상기 오디오 데이터의 유효한 언어가 있는지 여부를 나타내는 1 비트의 필드이며,
상기 보조 오디오 타입 프레즌트 필드가 기 설정된 제1 값으로 설정되면 상기 보조 오디오 타입 프레즌트 필드는 보조 오디오 타입 필드를 포함하고, 상기 보조 오디오 타입 프레즌트 필드가 기 설정된 제2 값으로 설정되면 상기 보조 오디오 타입 필드는 무시되며,
상기 믹스 오디오 필드가 기 설정된 제1 값으로 설정되면 상기 오디오 데이터는 상기 메인 오디오 및 상기 보조 오디오가 프리 믹스된 스트림을 포함하며,
상기 유효 언어 코드 필드가 기 설정된 제1 값으로 설정되면, 상기 오디오 데이터는 언어 코드 필드를 포함하는 데이터 송수신 시스템.In the data transmission and reception system,
A data transmission device that generates a packet including a first sub packet and a second sub packet for each audio stream and transmits the generated packets to the data reception device; And
Including; a data receiving device for receiving the packet from the data transmission device,
The first sub-packet and the second sub-packet contain different audio data for first content,
The packet includes a header and a payload,
The header includes a sequence number field indicating an order of packets included in the audio stream and a present field identifying a sub packet,
The payload includes an audio type information field,
The audio type information field includes an auxiliary audio type present field, an auxiliary audio type field, a mixed audio field, and a valid language code field,
The auxiliary audio type present field indicates whether auxiliary audio of audio data exists,
The auxiliary audio type field indicates a type of auxiliary audio for audio data included in each of the plurality of subpackets,
The mixed audio field is a 1-bit field indicating whether main audio data and auxiliary audio data are premixed,
The valid language code field is a 1-bit field indicating whether there is a valid language of the audio data,
When the auxiliary audio type present field is set to a preset first value, the auxiliary audio type present field includes an auxiliary audio type field, and when the auxiliary audio type present field is set to a preset second value, the auxiliary audio type present field is set to a preset second value. The audio type field is ignored,
When the mixed audio field is set to a preset first value, the audio data includes a stream in which the main audio and the auxiliary audio are premixed,
When the valid language code field is set to a preset first value, the audio data includes a language code field.
제1 서브 패킷 및 제2 서브 패킷 포함하는 패킷을 오디오 스트림마다 생성하는 단계; 및
상기 생성된 패킷을 데이터 수신 장치로 전송하는 단계;를 포함하고,
상기 제1 서브 패킷 및 상기 제2 서브 패킷은 제1 콘텐츠에 대한 상이한 오디오 데이터를 포함하고,
상기 패킷은 헤더와 페이로드를 포함하고,
상기 헤더는 상기 오디오 스트림에 포함되는 패킷의 순서를 나타내는 시퀀스 번호 필드 및 서브 패킷을 식별하는 프레즌트 필드를 포함하고,
상기 페이로드는 오디오 타입 정보 필드를 포함하고,
상기 오디오 타입 정보 필드는 보조 오디오 타입 프레즌트 필드, 보조 오디오 타입 필드, 믹스 오디오 필드 및 유효 언어 코드 필드를 포함하며,
상기 보조 오디오 타입 프레즌트 필드는 오디오 데이터의 보조 오디오가 존재하는지 여부를 나타내고,
상기 보조 오디오 타입 필드는 상기 복수의 서브 패킷들 각각에 포함된 오디오 데이터에 대한 보조 오디오의 타입을 나타내며,
상기 믹스 오디오 필드는 메인 오디오 데이터와 보조 오디오 데이터가 프리 믹스되는지 여부를 나타내는 1 비트의 필드이고,
상기 유효 언어 코드 필드는 상기 오디오 데이터의 유효한 언어가 있는지 여부를 나타내는 1 비트의 필드이며,
상기 보조 오디오 타입 프레즌트 필드가 기 설정된 제1 값으로 설정되면 상기 보조 오디오 타입 프레즌트 필드는 보조 오디오 타입 필드를 포함하고, 상기 보조 오디오 타입 프레즌트 필드가 기 설정된 제2 값으로 설정되면 상기 보조 오디오 타입 필드는 무시되며,
상기 믹스 오디오 필드가 기 설정된 제1 값으로 설정되면 상기 오디오 데이터는 상기 메인 오디오 및 상기 보조 오디오가 프리 믹스된 스트림을 포함하며,
상기 유효 언어 코드 필드가 기 설정된 제1 값으로 설정되면, 상기 오디오 데이터는 언어 코드 필드를 포함하는 데이터 전송 방법.In the data transmission method,
Generating a packet including a first sub packet and a second sub packet for each audio stream; And
Transmitting the generated packet to a data receiving device; Including,
The first sub-packet and the second sub-packet contain different audio data for first content,
The packet includes a header and a payload,
The header includes a sequence number field indicating an order of packets included in the audio stream and a present field identifying a sub packet,
The payload includes an audio type information field,
The audio type information field includes an auxiliary audio type present field, an auxiliary audio type field, a mixed audio field, and a valid language code field,
The auxiliary audio type present field indicates whether auxiliary audio of audio data exists,
The auxiliary audio type field indicates a type of auxiliary audio for audio data included in each of the plurality of subpackets,
The mixed audio field is a 1-bit field indicating whether main audio data and auxiliary audio data are premixed,
The valid language code field is a 1-bit field indicating whether there is a valid language of the audio data,
When the auxiliary audio type present field is set to a preset first value, the auxiliary audio type present field includes an auxiliary audio type field, and when the auxiliary audio type present field is set to a preset second value, the auxiliary audio type present field is set to a preset second value. The audio type field is ignored,
When the mixed audio field is set to a preset first value, the audio data includes a stream in which the main audio and the auxiliary audio are premixed,
When the valid language code field is set to a preset first value, the audio data includes a language code field.
데이터 전송 장치로부터 제1 서브 패킷 및 제2 서브 패킷 포함하는 패킷을 오디오 스트림마다 수신하는 단계; 및
상기 수신된 제1 서브 패킷 및 상기 제2 서브 패킷을 파싱하는 단계;를 포함하고,
상기 제1 서브 패킷 및 상기 제2 서브 패킷은 제1 콘텐츠에 대한 상이한 오디오 데이터를 포함하고,
상기 패킷은 헤더와 페이로드를 포함하고,
상기 헤더는 상기 오디오 스트림에 포함되는 패킷의 순서를 나타내는 시퀀스 번호 필드 및 서브 패킷을 식별하는 프레즌트 필드를 포함하고,
상기 페이로드는 오디오 타입 정보 필드를 포함하고,
상기 오디오 타입 정보 필드는 보조 오디오 타입 프레즌트 필드, 보조 오디오 타입 필드, 믹스 오디오 필드 및 유효 언어 코드 필드를 포함하며,
상기 보조 오디오 타입 프레즌트 필드는 오디오 데이터의 보조 오디오가 존재하는지 여부를 나타내고,
상기 보조 오디오 타입 필드는 상기 복수의 서브 패킷들 각각에 포함된 오디오 데이터에 대한 보조 오디오의 타입을 나타내며,
상기 믹스 오디오 필드는 메인 오디오 데이터와 보조 오디오 데이터가 프리 믹스되는지 여부를 나타내는 1 비트의 필드이고,
상기 유효 언어 코드 필드는 상기 오디오 데이터의 유효한 언어가 있는지 여부를 나타내는 1 비트의 필드이며,
상기 보조 오디오 타입 프레즌트 필드가 기 설정된 제1 값으로 설정되면 상기 보조 오디오 타입 프레즌트 필드는 보조 오디오 타입 필드를 포함하고, 상기 보조 오디오 타입 프레즌트 필드가 기 설정된 제2 값으로 설정되면 상기 보조 오디오 타입 필드는 무시되며,
상기 믹스 오디오 필드가 기 설정된 제1 값으로 설정되면 상기 오디오 데이터는 상기 메인 오디오 및 상기 보조 오디오가 프리 믹스된 스트림을 포함하며,
상기 유효 언어 코드 필드가 기 설정된 제1 값으로 설정되면, 상기 오디오 데이터는 언어 코드 필드를 포함하는 데이터 수신 방법.
In the data receiving method,
Receiving a packet including a first sub packet and a second sub packet from a data transmission device for each audio stream; And
Parsing the received first sub-packet and the second sub-packet; Including,
The first sub-packet and the second sub-packet contain different audio data for first content,
The packet includes a header and a payload,
The header includes a sequence number field indicating an order of packets included in the audio stream and a present field identifying a sub packet,
The payload includes an audio type information field,
The audio type information field includes an auxiliary audio type present field, an auxiliary audio type field, a mixed audio field, and a valid language code field,
The auxiliary audio type present field indicates whether auxiliary audio of audio data exists,
The auxiliary audio type field indicates a type of auxiliary audio for audio data included in each of the plurality of subpackets,
The mixed audio field is a 1-bit field indicating whether main audio data and auxiliary audio data are premixed,
The valid language code field is a 1-bit field indicating whether there is a valid language of the audio data,
When the auxiliary audio type present field is set to a preset first value, the auxiliary audio type present field includes an auxiliary audio type field, and when the auxiliary audio type present field is set to a preset second value, the auxiliary audio type present field is set to a preset second value. The audio type field is ignored,
When the mixed audio field is set to a preset first value, the audio data includes a stream in which the main audio and the auxiliary audio are premixed,
When the valid language code field is set to a preset first value, the audio data includes a language code field.
Priority Applications (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US14/213,074 US10356484B2 (en) | 2013-03-15 | 2014-03-14 | Data transmitting apparatus, data receiving apparatus, data transceiving system, method for transmitting data, and method for receiving data |
TW103109537A TWI666931B (en) | 2013-03-15 | 2014-03-14 | Data transmitting apparatus, data receiving apparatus and data transceiving system |
EP14160082.5A EP2779578B1 (en) | 2013-03-15 | 2014-03-14 | Data Transmitting Apparatus, Data Receiving Apparatus, Data Transceiving System, Method for Transmitting Data, and Method for Receiving Data |
CN201410098153.4A CN104053039B (en) | 2013-03-15 | 2014-03-17 | Data transmitter-receiver set, data receiving-transmitting system and data receiving-transmitting method |
JP2015562939A JP6514649B2 (en) | 2013-03-15 | 2014-03-17 | Data transmission apparatus, data reception apparatus, data transmission / reception system, data transmission method and data reception method |
PCT/KR2014/002230 WO2014142627A1 (en) | 2013-03-15 | 2014-03-17 | Data transmitting apparatus, data receiving apparatus, data transceiving system, method for transmitting data, and method for receiving data |
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201361789803P | 2013-03-15 | 2013-03-15 | |
US61/789,803 | 2013-03-15 | ||
US201361802807P | 2013-03-18 | 2013-03-18 | |
US61/802,807 | 2013-03-18 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20140115247A KR20140115247A (en) | 2014-09-30 |
KR102180826B1 true KR102180826B1 (en) | 2020-11-20 |
Family
ID=51758637
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020140025030A KR102201826B1 (en) | 2013-03-15 | 2014-03-03 | Data transmitting appratus, data receiving apparatus, data tranceiving system, method for transmitting data and method for receiving data |
KR1020140025653A KR102180826B1 (en) | 2013-03-15 | 2014-03-04 | Data transmitting appratus, data receiving apparatus, data tranceiving system, method for transmitting data and method for receiving data |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020140025030A KR102201826B1 (en) | 2013-03-15 | 2014-03-03 | Data transmitting appratus, data receiving apparatus, data tranceiving system, method for transmitting data and method for receiving data |
Country Status (3)
Country | Link |
---|---|
JP (2) | JP6514648B2 (en) |
KR (2) | KR102201826B1 (en) |
TW (2) | TWI666931B (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016129904A1 (en) * | 2015-02-10 | 2016-08-18 | 엘지전자 주식회사 | Broadcast signal transmission apparatus, broadcast signal reception apparatus, broadcast signal transmission method, and broadcast signal reception method |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012049934A (en) * | 2010-08-30 | 2012-03-08 | Hitachi Consumer Electronics Co Ltd | Transmission system |
Family Cites Families (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08331552A (en) * | 1995-05-31 | 1996-12-13 | Alpine Electron Inc | Voice signal processing unit for bs tuner |
JPH09149399A (en) * | 1995-11-21 | 1997-06-06 | Matsushita Electric Ind Co Ltd | Data transmission system |
JP3437371B2 (en) * | 1996-03-22 | 2003-08-18 | パイオニア株式会社 | Information recording device and information reproducing device |
CN100435569C (en) * | 1999-07-14 | 2008-11-19 | 松下电器产业株式会社 | Apparatus for providing information, information receiver and storage medium |
US8046792B2 (en) * | 2002-03-20 | 2011-10-25 | Tvworks, Llc | Multi-channel audio enhancement for television |
US7227899B2 (en) * | 2003-08-13 | 2007-06-05 | Skystream Networks Inc. | Method and system for re-multiplexing of content-modified MPEG-2 transport streams using interpolation of packet arrival times |
AU2006277225B2 (en) * | 2005-08-09 | 2011-06-09 | Panasonic Corporation | Recording medium, playback apparatus, method and program |
KR100750143B1 (en) * | 2005-12-05 | 2007-08-21 | 삼성전자주식회사 | Method and apparatus for storing digital broadcasting Signal |
JP2007281716A (en) * | 2006-04-04 | 2007-10-25 | Sony Corp | Wireless moving picture transmission system, wireless moving picture transmission method, wireless moving picture transmission apparatus, wireless moving picture transmission method, and computer program thereof, wireless moving picture receiving apparatus, wireless moving picture receiving method, and computer program thereof |
JP2008005112A (en) * | 2006-06-21 | 2008-01-10 | Matsushita Electric Ind Co Ltd | Stream encoder and stream decoder |
TWI420504B (en) * | 2007-03-19 | 2013-12-21 | Cyberlink Corp | Method and related system capable of multiple displays |
US8744337B2 (en) * | 2007-06-18 | 2014-06-03 | Qualcomm Incorporated | Apparatus and methods of enhancing radio programming |
KR100942142B1 (en) * | 2007-10-11 | 2010-02-16 | 한국전자통신연구원 | Method and apparatus for transmitting and receiving of the object based audio contents |
JP4874284B2 (en) * | 2008-03-27 | 2012-02-15 | パナソニック株式会社 | Digital broadcast receiver |
JP2009253414A (en) * | 2008-04-02 | 2009-10-29 | Nec Corp | Content delivery system, repeater, terminal device, content delivery method, program and recording medium |
WO2010050920A1 (en) * | 2008-10-31 | 2010-05-06 | Thomson Licensing | Method, apparatus and system for providing supplemental audio/video content |
JP2010200087A (en) * | 2009-02-26 | 2010-09-09 | Funai Electric Co Ltd | Video apparatus |
JP2012010311A (en) * | 2010-05-26 | 2012-01-12 | Sony Corp | Transmitter, transmission method, receiver, reception method and transmission/reception system |
KR20120016407A (en) * | 2010-08-16 | 2012-02-24 | 엘지전자 주식회사 | Operating method of display system outputting audio description for the visually impaired and display system enabling of the method |
JP2012060205A (en) * | 2010-09-06 | 2012-03-22 | Hitachi Consumer Electronics Co Ltd | Display system, display device, and repeating device |
EP2451196A1 (en) * | 2010-11-05 | 2012-05-09 | Thomson Licensing | Method and apparatus for generating and for decoding sound field data including ambisonics sound field data of an order higher than three |
JP2012151688A (en) * | 2011-01-19 | 2012-08-09 | Canon Inc | Video reproduction device and method of controlling the same, program, and storage medium |
US9398322B2 (en) * | 2011-04-27 | 2016-07-19 | Time Warner Cable Enterprises Llc | Multi-lingual audio streaming |
JP2012253439A (en) * | 2011-05-31 | 2012-12-20 | Kddi Corp | Multimedia device |
US20140118616A1 (en) * | 2012-10-26 | 2014-05-01 | Cox Communications, Inc. | Systems and Methods of Video Delivery to a Multilingual Audience |
-
2014
- 2014-03-03 KR KR1020140025030A patent/KR102201826B1/en active IP Right Grant
- 2014-03-04 KR KR1020140025653A patent/KR102180826B1/en active IP Right Grant
- 2014-03-14 TW TW103109537A patent/TWI666931B/en not_active IP Right Cessation
- 2014-03-14 TW TW103109532A patent/TWI625056B/en not_active IP Right Cessation
- 2014-03-17 JP JP2015562938A patent/JP6514648B2/en not_active Expired - Fee Related
- 2014-03-17 JP JP2015562939A patent/JP6514649B2/en not_active Expired - Fee Related
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012049934A (en) * | 2010-08-30 | 2012-03-08 | Hitachi Consumer Electronics Co Ltd | Transmission system |
Also Published As
Publication number | Publication date |
---|---|
JP2016515352A (en) | 2016-05-26 |
TW201438460A (en) | 2014-10-01 |
KR20140115247A (en) | 2014-09-30 |
TW201442494A (en) | 2014-11-01 |
KR20140115245A (en) | 2014-09-30 |
JP6514649B2 (en) | 2019-05-22 |
TWI625056B (en) | 2018-05-21 |
JP6514648B2 (en) | 2019-05-15 |
JP2016513930A (en) | 2016-05-16 |
KR102201826B1 (en) | 2021-01-12 |
TWI666931B (en) | 2019-07-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10356484B2 (en) | Data transmitting apparatus, data receiving apparatus, data transceiving system, method for transmitting data, and method for receiving data | |
US9723245B2 (en) | Data transmitting apparatus, data receiving apparatus, data transceiving system, method for transmitting data, and method for receiving data | |
US9313576B2 (en) | Data transmitting apparatus, data receiving apparatus, data transceiving system, data transmitting method, and data receiving method | |
US20130222690A1 (en) | Data transmission apparatus, data receiving apparatus, data transceiving system, data transmission method and data receiving method | |
KR20130031767A (en) | Method and apparatus for synchronizing media data of multimedia broadcast service | |
US20230067389A1 (en) | Transmission device, transmission method, reception device, and a reception method | |
EP2629541A2 (en) | Data transmitting apparatus, data receiving apparatus, data transceiving system, data transmitting method, data receiving method and data transceiving method | |
KR102180826B1 (en) | Data transmitting appratus, data receiving apparatus, data tranceiving system, method for transmitting data and method for receiving data | |
KR102012231B1 (en) | Data transmitting apparatus, data receiving apparatus, data transreceiving system, data transmitting method, data receiving method and data transreceiving method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E90F | Notification of reason for final refusal | ||
E701 | Decision to grant or registration of patent right |