RU2415483C2 - Player - Google Patents

Player Download PDF

Info

Publication number
RU2415483C2
RU2415483C2 RU2007141173/28A RU2007141173A RU2415483C2 RU 2415483 C2 RU2415483 C2 RU 2415483C2 RU 2007141173/28 A RU2007141173/28 A RU 2007141173/28A RU 2007141173 A RU2007141173 A RU 2007141173A RU 2415483 C2 RU2415483 C2 RU 2415483C2
Authority
RU
Russia
Prior art keywords
time
stream
packets
information
audio
Prior art date
Application number
RU2007141173/28A
Other languages
Russian (ru)
Other versions
RU2007141173A (en
Inventor
Хироси ЯХАТА (JP)
Хироси ЯХАТА
Томоюки ОКАДА (JP)
Томоюки ОКАДА
Original Assignee
Панасоник Корпорэйшн
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Панасоник Корпорэйшн filed Critical Панасоник Корпорэйшн
Publication of RU2007141173A publication Critical patent/RU2007141173A/en
Application granted granted Critical
Publication of RU2415483C2 publication Critical patent/RU2415483C2/en

Links

Images

Landscapes

  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

FIELD: information technology.
SUBSTANCE: device plays from the recording medium a stream of the main track and a stream of the auxiliary track. At any moment in time, total volume of data of the played streams does not exceed a predefined value.
EFFECT: prevention of buffer overflow.
5 cl, 43 dwg

Description

Настоящее изобретение принадлежит к области техники инфраструктуры сверхуплотнения (Oub-of-MUX).The present invention belongs to the field of technology of the infrastructure of super-compaction (Oub-of-MUX).

ПРЕДШЕСТВУЮЩИЙ УРОВЕНЬ ТЕХНИКИBACKGROUND OF THE INVENTION

Инфраструктура сверхуплотнения является технологией, которая одновременно считывает цифровой поток, записанный на носитель записи только для чтения, такой как BD-ROM (постоянное запоминающее устройство на диске стандарта Blue-ray), и цифровой поток, записанный на локальном запоминающем устройстве, таком как носитель записи с многократной перезаписью, подает их на декодер, а затем синхронно их воспроизводит.Over-compaction infrastructure is a technology that simultaneously reads a digital stream recorded on a read-only recording medium such as a BD-ROM (read-only memory device on a Blue-ray standard disc) and a digital stream recorded on a local storage device such as a recording medium with multiple dubbing, feeds them to the decoder, and then plays them synchronously.

Здесь допустим, что цифровой поток, записанный на BD-ROM, является основной частью кинофильма, тогда как цифровой поток, записанный в локальном запоминающем устройстве, является дикторским текстом режиссера кинофильма. В этом случае посредством реализации вышеупомянутой инфраструктуры сверхуплотнения основная часть кинофильма на BD-ROM и дикторский текст могут воспроизводиться вместе, каковое, тем самым, уточняет и расширяет контент на BD-ROM.Here we assume that the digital stream recorded on the BD-ROM is the main part of the movie, while the digital stream recorded in the local storage device is the narration of the movie director. In this case, by implementing the aforementioned over-compaction infrastructure, the main part of the movie on the BD-ROM and the narration text can be played together, which thereby refines and extends the content on the BD-ROM.

Предшествующий уровень техники касательно носителей записи только для чтения включает в себя следующую заявку на патент.The prior art regarding read-only recording media includes the following patent application.

<Ссылка 1 на патент> Выложенная заявка №Н8-83478 на выдачу патента Японии<Patent reference 1> Laid-open Application No. H8-83478 for Japanese Patent

РАСКРЫТИЕ ИЗОБРЕТЕНИЯSUMMARY OF THE INVENTION

[Задачи, которые должно решить изобретение][Problems to be solved by the invention]

В вышеописанной инфраструктуре сверхуплотнения поток, записанный на BD-ROM, и поток, записанный в локальном запоминающем устройстве, должны считываться одновременно, а пакетам TS (транспортного потока), составляющим эти потоки, необходимо подаваться в декодер. Согласно исследованию того, насколько большая полоса пропускания требуется для подачи в декодер в наихудшем случае, где битовая скорость поставки BD-ROM составляет 48 Мбит/с и битовая скорость поставки локального запоминающего устройства составляет 48 Мбит/с, снабжение данными в таком количестве как 96 Мбит (48 Мбит + 48 Мбит) может происходить в течение периода одновременного считывания. Если такой наихудший случай вероятен для возникновения, полоса пропускания в устройстве должна быть расширена, с тем чтобы выдавать пакеты TS при 96 Мбит/с. Если это не может быть сделано, необходимо обеспечить большой буфер в декодере и заставить декодер выполнять операцию предварительного чтения, чтобы считывать пакеты TS заблаговременно, с тем чтобы поставка не сосредотачивалась в некоторый момент времени. Если период одновременного считывания короток, это может быть возможным; однако в случае воспроизведения кинофильма длительностью в два часа емкость буфера является недостаточной, а операция предварительного чтения поэтому не выполняется успешно.In the above supercompression infrastructure, the stream recorded on the BD-ROM and the stream recorded in the local storage must be read at the same time, and the TS packets (transport stream) constituting these streams must be supplied to the decoder. According to a study of how much bandwidth is required to feed to the decoder in the worst case, where the BD-ROM delivery bit rate is 48 Mbit / s and the local storage device's bit delivery rate is 48 Mbit / s, data is supplied in as much as 96 Mbit (48 Mbps + 48 Mbps) may occur during the simultaneous read period. If such a worst case is likely to occur, the bandwidth in the device should be expanded in order to produce TS packets at 96 Mbps. If this cannot be done, it is necessary to provide a large buffer in the decoder and force the decoder to perform a pre-read operation in order to read TS packets in advance so that the delivery does not focus at some point in time. If the simultaneous reading period is short, this may be possible; however, in the case of playing a movie lasting two hours, the buffer capacity is insufficient, and the preliminary reading operation is therefore not successful.

Поскольку операция предварительного чтения не выполняется успешно, отрицательное переполнение происходит в буфере вследствие операции предварительного чтения. Это в таком случае вызывает потерю видео и аудио, а потому качество воспроизведения значительно снижается. Однако доставка данных с высокой битовой скоростью имеет следствием препятствие снижению цены таких устройств воспроизведения.Because the pre-read operation is not successful, a negative overflow occurs in the buffer due to the pre-read operation. In this case, this causes loss of video and audio, and therefore the playback quality is significantly reduced. However, the delivery of data with a high bit rate results in an obstacle to lowering the price of such playback devices.

Настоящее изобретение нацеливается на предоставление носителя записи, допускающего подачу в декодер цифровых потоков, подаваемых с разных носителей записи, без необходимости в том, чтобы расширялась полоса пропускания.The present invention aims to provide a recording medium capable of supplying digital streams supplied from different recording media to the decoder without the need for a wider bandwidth.

[Средство для решения задачи][Means for solving the problem]

Для того чтобы достичь вышеупомянутой цели, носитель записи по настоящему изобретению характеризуется тем, что: информация списка воспроизведения включает в себя информацию о главном пути и информацию о вспомогательном пути; информация о главном пути задает из числа множества цифровых потоков один цифровой поток в качестве основного потока и определяет секцию первичного воспроизведения в основном потоке; информация о вспомогательном пути задает среди остальных из упомянутого множества цифровых потоков один цифровой поток в качестве вспомогательного потока и определяет во вспомогательном потоке секцию вторичного воспроизведения, которая должна синхронизироваться с секцией первичного воспроизведения; информация списка воспроизведения дополнительно включает в себя таблицу потоков, показывающую по меньшей мере одну пару элементарных потоков, которым предоставлена возможность воспроизводиться одновременно, причем эта пара элементарных потоков является состоящей из одного из множества элементарных потоков, мультиплексированных в основной поток, и одного из множества элементарных потоков, мультиплексированных во вспомогательный поток; и суммарный объем данных цифрового потока в единицу времени является меньшим чем или равным предопределенному значению, причем цифровой поток включает в себя упомянутую пару элементарных потоков и не включает в себя элементарный поток, которому в таблице потоков не предоставлена возможность воспроизводиться одновременно.In order to achieve the aforementioned goal, the recording medium of the present invention is characterized in that: playlist information includes main path information and auxiliary path information; information about the main path sets from among the number of digital streams one digital stream as the main stream and determines the primary playback section in the main stream; the sub-path information sets among the rest of the plurality of digital streams one digital stream as an auxiliary stream and determines in the auxiliary stream a secondary reproduction section to be synchronized with the primary reproduction section; playlist information further includes a stream table showing at least one pair of elementary streams that are allowed to play simultaneously, this pair of elementary streams consisting of one of a plurality of elementary streams multiplexed into the main stream and one of a plurality of elementary streams multiplexed into the auxiliary stream; and the total amount of data of the digital stream per unit time is less than or equal to a predetermined value, and the digital stream includes the aforementioned pair of elementary streams and does not include the elementary stream, which in the stream table is not allowed to play simultaneously.

[Полезные результаты изобретения][Useful Results of the Invention]

Суммарный объем данных в единицу времени множества элементарных потоков, разрешенных в таблице потоков для воспроизведения, является меньшим чем или равным упомянутому предопределенному значению. Даже в наихудшем случае количество пакетов TS, передаваемых в единицу времени, не превышает этого предопределенного значения.The total amount of data per unit time of the set of elementary streams allowed in the stream table for reproduction is less than or equal to said predetermined value. Even in the worst case, the number of TS packets transmitted per unit of time does not exceed this predetermined value.

Например, в случае где единицей времени является одна секунда, а предопределенное значение составляет 48 Мбит, если объем поставки пакетов TS локально достигает 96 Мбит вследствие одновременного считывания потоков, количество битов в секунду удерживается меньшим чем или равным 48 Мбит. Соответственно, наихудший случай - то есть объем доставки данных в 96 Мбит - не продолжается в течение 0,5 секунд или более.For example, in the case where the unit of time is one second and the predefined value is 48 Mbit, if the TS packet delivery locally reaches 96 Mbit due to the simultaneous reading of the streams, the number of bits per second is kept less than or equal to 48 Mbit. Accordingly, the worst case — that is, a 96 Mbit data delivery volume — does not last for 0.5 seconds or more.

Поскольку гарантировано, что «наихудший случай не продолжается в течение 0,5 секунд или более», в любой момент на временной оси воспроизведения потока, отрицательное переполнение в буфере декодера может быть предотвращено построением устройства воспроизведения таким образом, что пакеты TS с размером в 96 Мбит × 0,5 секунд всегда считываются заблаговременно и подаются в декодер.Since it is guaranteed that “the worst case does not last for 0.5 seconds or more”, at any time on the time axis of the stream playback, negative overflow in the decoder buffer can be prevented by constructing the playback device so that TS packets with a size of 96 Mbit × 0.5 seconds are always read in advance and fed to the decoder.

Операция предварительного чтения с верхним пределом в «96 Мбит × 0,5 секунд» предотвращает возникновение отрицательного переполнения, а потому пакеты TS могут устойчиво подаваться в декодер. Это устраняет риск, что одновременное считывание для реализации инфраструктуры сверхуплотнения оказывает влияние на качество цифрового потока. Возможно реализовать инфраструктуру сверхуплотнения в устройстве воспроизведения, которое выполняет воспроизведение BD-ROM, однако не требуя ширины полосы пропускания, которая должна быть увеличена. Как результат, устройства воспроизведения, которые реализуют инфраструктуру сверхуплотнения, могут быть выведены на рынок с низкими ценами.The pre-read operation with an upper limit of “96 Mbps × 0.5 seconds” prevents negative overflow, and therefore TS packets can be stably fed to the decoder. This eliminates the risk that simultaneous reads to implement overcompression infrastructure will affect the quality of the digital stream. It is possible to implement an over-compression infrastructure in a reproducing apparatus that performs BD-ROM reproduction, but without requiring a bandwidth that needs to be increased. As a result, playback devices that implement over-compaction infrastructure can be brought to market at low prices.

В дополнение, с ограничением в «48 Мбит/с или меньше в секунду», если устройство воспроизведения выполняет простое управление «неизменного выполнения операции предварительного чтения», как описано выше, возможно предотвратить возникновение отрицательного переполнения, даже если возникает снабжение данными наихудшего случая. Это устраняет необходимость реализации последовательности операций для предсказания временных соотношений, при которых могло бы возникать снабжение данными по наихудшему случаю, тем самым, способствуя развитию устройств воспроизведения.In addition, with a limitation of “48 Mbps or less per second”, if the reproducing apparatus performs simple control of “continuously executing the pre-read operation” as described above, it is possible to prevent the occurrence of negative overflow even if the worst-case data supply occurs. This eliminates the need to implement a sequence of operations for predicting time relationships at which the worst-case data supply could occur, thereby contributing to the development of reproducing devices.

Перечень чертежейList of drawings

Фиг.1 показывает потребительское применение носителя записи согласно настоящему изобретению;Figure 1 shows the consumer use of a recording medium according to the present invention;

фиг.2 показывает внутреннюю структуру BD-ROM;figure 2 shows the internal structure of the BD-ROM;

фиг.3 - схематичная структура файла с расширением.m2ts, закрепленным за ним;figure 3 - schematic structure of the file with the extension.m2ts assigned to it;

фиг.4 показывает дополнительные подробности того, каким образом видео- и аудиопотоки хранятся в последовательности пакетов PES;4 shows additional details of how video and audio streams are stored in a sequence of PES packets;

фиг.5 показывает, каким образом видео и аудио мультиплексируются в программный поток и транспортный поток;5 shows how video and audio are multiplexed into a program stream and a transport stream;

фиг.6 показывает детализацию транспортного потока;6 shows a detail of the transport stream;

фиг.7 показывает внутренние структуры пакета PAT и пакета PMT;7 shows the internal structures of a PAT packet and a PMT packet;

фиг.8 показывает, каким последовательностям операции подвергаются пакеты TS, составляющие AV-клип (AVClip, аудиовидеоклип), перед тем как они записываются на BD-ROM;Fig. 8 shows what operation sequences TS packets constituting the AV clip (AVClip, AV clip) are subjected to before being recorded onto the BD-ROM;

фиг.9 показывает внутреннюю структуру выровненного блока (Aligned Unit);Fig.9 shows the internal structure of the aligned block (Aligned Unit);

фиг.10 показывает внутреннюю структуру информации о клипах;10 shows an internal structure of clip information;

фиг.11 показывает настройки карты EP (EP_map) для видеопотока кинофильма;11 shows the settings of an EP card (EP_map) for a movie video stream;

фиг.12 показывает структуру данных информации списка воспроизведения (PlayList);12 shows a data structure of information of a playlist (PlayList);

фиг.13 показывает взаимосвязи между AV-клипом и информацией списка воспроизведения;13 shows the relationships between the AV clip and the playlist information;

фиг.14 показывает внутреннюю структуру локального запоминающего устройства 200;Fig shows the internal structure of the local storage device 200;

фиг.15 показывает способ, которым первичный TS (Primary TS) и вторичный TS (Secondary TS), формирующие приложение сверхуплотнения, подаются в декодер в пределах устройства воспроизведения BD-ROM;FIG. 15 shows a method by which a primary TS (Primary TS) and a secondary TS (Secondary TS) forming an over-densification application are supplied to a decoder within a BD-ROM reproducing apparatus;

фиг.16 показывает структуру данных информации списка воспроизведения;16 shows a data structure of information of a playlist;

фиг.17 показывает раскрытие внутренней структуры информации о вспомогательном пути;Fig. 17 shows a disclosure of the internal structure of the auxiliary path information;

фиг.18 показывает взаимосвязь вспомогательных клипов в локальном запоминающем устройстве 200, информации списка воспроизведения в локальном запоминающем устройстве 200 и основного клипа (MainClip) на BD-ROM;Fig. 18 shows the relationship of auxiliary clips in local storage 200, playlist information in local storage 200, and main clip (MainClip) on a BD-ROM;

фиг.19A показывает внутреннюю структуру таблицы STN (STN_table);figa shows the internal structure of the table STN (STN_table);

фиг.19B показывает атрибут потока (Stream_attribute), соответствующий видеопотоку;FIG. 19B shows a stream attribute (Stream_attribute) corresponding to a video stream;

фиг.19C показывает атрибут потока (Stream_attribute), соответствующий аудиопотоку;Fig. 19C shows a stream attribute (Stream_attribute) corresponding to an audio stream;

фиг.19D показывает вход потока (Stream_entry) аудиопотока;fig.19D shows the input stream (Stream_entry) audio stream;

фиг.20 показывает пакеты TS, считываемые с BD-ROM и из локального запоминающего устройства, и иллюстрирует из этих пакетов TS те, которые должны подаваться в декодер;FIG. 20 shows TS packets read from a BD-ROM and from a local storage device, and illustrates from these TS packets those to be supplied to a decoder; FIG.

фиг.21A-21D показывают сдвиг окна (Window);figa-21D show the shift of the window (Window);

фиг.22 - график, показывающий временную модуляцию касательно объема данных пакетов TS, считываемых с BD-ROM, а также объема данных пакетов TS, считываемых из локального запоминающего устройства;FIG. 22 is a graph showing temporal modulation regarding the amount of data of the TS packets read from the BD-ROM, as well as the data volume of the TS packets read from the local storage;

фиг.23A и 23B показывают сравнение между передаваемым объемом и объемом, подаваемым в декодер в течение каждого окна;23A and 23B show a comparison between the transmitted volume and the volume supplied to the decoder during each window;

фиг.24 показывает состояние соединения элементов воспроизведения (PlayItem) и элементов вспомогательного воспроизведения (SubPlayItem), составляющих сверхуплотнение;Fig. 24 shows a connection state of playitems (PlayItem) and auxiliary playitems (SubPlayItem) constituting over-compaction;

фиг.25 показывает взаимосвязь между моментами времени начала (In_Time) и моментами времени окончания (Out_Time) элементов воспроизведения и моментами времени начала (In_Time) и моментами времени окончания (Out_Time) элементов вспомогательного воспроизведения в случае, где информация об условии соединения (connection_condition) элемента воспроизведения и информация об условии соединения SP (sp_connection_condition) элемента вспомогательного воспроизведения, показанные на фиг.24, установлены в «=5»;Fig. 25 shows the relationship between start times (In_Time) and finish times (Out_Time) of playitems and start times (In_Time) and finish times (Out_Time) of auxiliary playitems in the case where the connection condition information (connection_condition) of the item playback and connection condition information SP (sp_connection_condition) of the sub playback element shown in FIG. 24 is set to “= 5”;

фиг.26 показывает значение STC, которое должно подвергаться обращению, когда воспроизводится часть, существующая от момента времени начала (In_Time) до момента времени окончания (Out_Time) элемента воспроизведения, и значение STC, которое должно подвергаться обращению, когда воспроизводится часть, существующая от момента времени начала (In_Time) до момента времени окончания (Out_Time) элемента вспомогательного воспроизведения;FIG. 26 shows an STC value to be processed when a part existing from a start time (In_Time) to an end time (Out_Time) of a playitem is reproduced, and an STC value to be processed when a part existing from a moment is played start time (In_Time) to the end time (Out_Time) of the sub play item;

фиг.27 показывает, каким образом TS1 и TS2 идентифицируются в основном клипе, указанном ссылкой в предыдущем элементе воспроизведения, и вспомогательном клипе, указанном ссылкой в текущем элементе воспроизведения;Fig. 27 shows how TS1 and TS2 are identified in the main clip indicated by the link in the previous playitem and the auxiliary clip indicated by the link in the current playitem;

фиг.28 показывает подробности по CC=5 и SP_CC=5;Fig. 28 shows details on CC = 5 and SP_CC = 5;

фиг.29 показывает взаимосвязь между многочисленными блоками представления видео, заданными предыдущим элементом воспроизведения и текущим элементом воспроизведения, многочисленными блоками представления аудио и временными осями STC;Fig. 29 shows the relationship between the plurality of video presentation units defined by the previous playitem and the current playitem, the multiple audio presentation units and the time axes of the STC;

фиг.30 показывает внутреннюю структуру устройства воспроизведения по настоящему изобретению;30 shows an internal structure of a reproducing apparatus of the present invention;

фиг.31 - блок-схема последовательности операций способа, показывающая процедуру воспроизведения на основании информации списка воспроизведения;FIG. 31 is a flowchart showing a reproducing procedure based on the information of the playlist; FIG.

фиг.32 - блок-схема последовательности операций способа, показывающая процедуру обработки безразрывного соединения элементов вспомогательного воспроизведения;32 is a flowchart showing a process for processing a seamless connection of sub-play elements;

фиг.33 показывает внутреннюю структуру системы авторской разработки по варианту 2 осуществления;Fig. 33 shows the internal structure of the authoring system of Embodiment 2;

фиг.34 - блок-схема последовательности операций способа, показывающая процедуру проверки над первичными TS и вторичными TS;Fig. 34 is a flowchart showing a verification procedure for primary TS and secondary TS;

фиг.35 - последовательность операций способа, показывающая процедуру проверки над первичным TS и вторичным TS, когда имеют место многочисленные потоки одинакового типа;Fig. 35 is a flowchart showing a verification procedure for a primary TS and a secondary TS when multiple streams of the same type occur;

фиг.36 показывает подробное пояснение CC=6;Fig. 36 shows a detailed explanation of CC = 6;

фиг.37 показывает взаимосвязь между элементами воспроизведения и элементами вспомогательного воспроизведения;Fig. 37 shows the relationship between playitems and sub playitems;

фиг.38 схематично показывает способ, которым мультиплексируются многочисленные пакеты TS, присутствующие на временной оси ATC;Fig. 38 schematically shows a method by which multiple TS packets present on an ATC time axis are multiplexed;

фиг.39 схематично показывает, в случае где субтитр (PG) и меню (IG) также замещаются в дополнение к аудио, способ, которым совместно мультиплексируются многочисленные пакеты TS, составляющие первичный TS, и многочисленные пакеты TS, составляющие вторичный TS;Fig. 39 schematically shows, in a case where the subtitle (PG) and menu (IG) are also replaced in addition to audio, the manner in which multiple TS packets constituting the primary TS and multiple TS packets constituting the secondary TS are multiplexed together;

фиг.40 показывает способ, которым первичный TS и вторичный TS, составляющие приложение микширования аудио, подаются в декодер в пределах устройства воспроизведения BD-ROM;40 shows a method by which a primary TS and a secondary TS constituting an audio mixing application are supplied to a decoder within a BD-ROM reproducing apparatus;

фиг.41 показывает внутреннюю структуру устройства воспроизведения согласно варианту 5 осуществления;41 shows an internal structure of a reproducing apparatus according to Embodiment 5;

фиг.42 показывает взаимосвязь между элементами воспроизведения и элементами вспомогательного воспроизведения, заданными списком воспроизведения, указывающим микширование аудио, иFig. 42 shows a relationship between playitems and sub playitems defined by a playlist indicating audio mixing, and

фиг.43 показывает пример информации списка воспроизведения, формирующей сценический вариант и режиссерскую нарезку.Fig. 43 shows an example of playlist information forming a stage version and directorial cut.

Условные обозначенияLegend

1a - дисковод BD-ROM1a - BD-ROM drive

1b, c - буфер чтения1b, c - read buffer

1b, a, c - счетчик ATC1b, a, c - ATC counter

2a, d - средство депакетирования (депакетизатор) источника2a, d - source depacketizer (depacketizer) of the source

2c, d - счетчик ATC2c, d - ATC counter

3a, c - счетчик STC3a, c - STC counter

3b, d - фильтр PID3b, d - PID filter

4 - видеодекодер4 - video decoder

5 - видеоплата5 - video card

6 - транспортный буфер6 - transport buffer

7 - элементарный буфер7 - elementary buffer

8 - аудиодекодер8 - audio decoder

10a, b, c, d - коммутатор10a, b, c, d - switch

11 - декодер интерактивной графики11 - interactive graphics decoder

12 - плата интерактивной графики12 - interactive graphics board

13 - декодер демонстрационной графики13 - demo decoder

14 - плата демонстрационной графики14 - demo board

17 - модуль синтеза17 - synthesis module

21 - память21 - memory

22 - контроллер22 - controller

23 - набор PSR23 - PSR kit

24 - модуль преобразования PID24 - PID conversion module

25 - сетевой модуль25 - network module

26 - модуль приема операций26 - operations receiving module

100 - BD-ROM100 - BD-ROM

200 - локальное запоминающее устройство200 - local storage device

300 - устройство воспроизведения300 - playback device

400 - телевизор400 - TV

500 - AV-усилитель500 - AV amplifier

Наилучший вариант осуществления изобретенияBest Mode for Carrying Out the Invention

Вариант 1 осуществленияOption 1 implementation

Последующее дает отчет о предпочтительном варианте осуществления носителя записи согласно настоящему изобретению. Прежде всего, описано потребительское применение относительно реализации носителя записи по настоящему изобретению. Фиг.1 показывает потребительское применение носителя записи согласно настоящему изобретению. Локальное запоминающее устройство 200 по фиг.1 является носителем записи по настоящему изобретению. Локальное запоминающее устройство 200 используется с целью подачи кинофильма в систему домашнего кинотеатра, состоящую из устройства 300 воспроизведения, телевизора 400, AV-усилителя 500 и акустических колонок 600.The following reports on a preferred embodiment of the recording medium according to the present invention. First of all, consumer use is described with respect to the implementation of the recording medium of the present invention. Figure 1 shows the consumer use of a recording medium according to the present invention. The local storage device 200 of FIG. 1 is a recording medium of the present invention. The local storage device 200 is used to supply a movie to a home theater system consisting of a playback device 300, a television 400, an AV amplifier 500, and speakers 600.

Последующее разъясняет BD-ROM 100, локальное запоминающее устройство 200 и устройство 300 воспроизведения.The following explains the BD-ROM 100, the local storage device 200, and the playback device 300.

BD-ROM 100 является носителем записи, на котором записан кинофильм.The BD-ROM 100 is a recording medium on which a movie is recorded.

Локальным запоминающим устройством 200 является жесткий диск, который встроен в устройство воспроизведения и используется для хранения контента, распространяемого с сервера дистрибьютора кинофильмов.Local storage device 200 is a hard disk drive that is built into the playback device and is used to store content distributed from the movie distributor server.

Устройство 300 воспроизведения является цифровым домашним электроприбором, поддерживаемым касательно сетей, и имеет функцию для воспроизведения BD-ROM 100. Устройство 300 воспроизведения также способно загружать контент с сервера 700 дистрибьютора кинофильмов через сеть, сохранять загруженный контент на локальном запоминающем устройстве 200 и объединять этот контент с контентом, записанным на BD-ROM 100 для расширения/обновления контента BD-ROM 100. Технология, названная «виртуальным пакетом программ», объединяет контент, записанный на BD-ROM 100, с контентом, сохраненным в локальном запоминающем устройстве 200, и интерпретирует данные, не записанные на BD-ROM 100 таким способом, как если бы они были записаны на BD-ROM 100.The playback device 300 is a digital home appliance supported with respect to networks and has a function for playing the BD-ROM 100. The playback device 300 is also capable of downloading content from the movie distributor server 700 via the network, storing the downloaded content on the local storage device 200, and combining this content with content recorded on the BD-ROM 100 to expand / update the content of the BD-ROM 100. A technology called the “virtual software package” combines content recorded on the BD-ROM 100 with content th stored in the local storage 200, and interprets the data not recorded on the BD-ROM 100 in a manner as if they were recorded on the BD-ROM 100.

В этом заключается описание традиционного применения носителя записи по настоящему изобретению.This is a description of the traditional use of the recording medium of the present invention.

Следующим описано производственное применение носителя записи по настоящему изобретению. Носитель записи по настоящему изобретению может быть реализован в качестве результата усовершенствований файловой системы BD-ROM.The following describes the manufacturing use of the recording medium of the present invention. The recording medium of the present invention can be implemented as a result of improvements to the BD-ROM file system.

<Общее описание BD-ROM><General description of BD-ROM>

Фиг.2 показывает внутреннюю структуру BD-ROM; Уровень 4 на фигуре показывает BD-ROM, а уровень 3 показывает дорожку на BD-ROM. Фигура изображает дорожку в растянутом в длину виде, хотя дорожка фактически сформирована в спираль, навивающуюся от внутренней части по направлению к наружной части BD-ROM. Дорожка состоит из начальной области, области тома и конечной области. Область тома на фигуре содержит уровневую модель, составленную из физического уровня, уровня файловой системы и прикладного уровня. Уровень 1 на фигуре показывает формат прикладного уровня BD-ROM посредством использования структуры каталогов. На уровне 1 BD-ROM содержит каталог EDMV под корневым (Root) каталогом.Figure 2 shows the internal structure of the BD-ROM; Level 4 in the figure shows a BD-ROM, and level 3 shows a track on the BD-ROM. The figure depicts a track in an elongated form, although the track is actually formed into a spiral winding from the inside towards the outside of the BD-ROM. A track consists of a start region, a volume region, and an end region. The volume region in the figure contains a layered model composed of a physical layer, a file system layer, and an application layer. Layer 1 in the figure shows the BD-ROM application layer format by using a directory structure. At level 1, the BD-ROM contains the EDMV directory under the root (Root) directory.

Кроме того, три подкаталога расположены под каталогом BDMV: каталог PLAYLIST (списка воспроизведения); каталог CLIPINF (информации о клипах) и каталог STREAM (потоков).In addition, three subdirectories are located under the BDMV directory: the PLAYLIST (playlist) directory; CLIPINF directory (information about clips) and STREAM directory (streams).

Каталог PIAYLIST включает в себя файл, за которым закреплено расширение mpls (00001.mpls).The PIAYLIST directory includes a file for which the mpls extension (00001.mpls) is assigned.

Каталог CLIPINF включает в себя файлы, за каждым из которых закреплено расширение clip (00001.clip и 00002.clip).The CLIPINF directory includes files, each of which has a clip extension (00001.clip and 00002.clip).

Каталог STREAM включает в себя файлы, за которыми закреплено расширение m2ts (00001.m2ts и 00002.m2ts).The STREAM directory includes files that are assigned the m2ts extension (00001.m2ts and 00002.m2ts).

Таким образом, можно видеть, что многочисленные файлы разных типов скомпонованы на BD-ROM согласно структуре каталогов, приведенной выше.Thus, it can be seen that numerous files of various types are arranged on the BD-ROM according to the directory structure given above.

<Структура 1 BD-ROM: AV-клип><Structure 1 BD-ROM: AV clip>

Прежде всего, пояснены файлы, за которыми закреплено расширение «m2ts». Фиг.3 показывает схематичную структуру файла, за которым закреплено расширение «m2ts». Файлы, за каждым из которых закреплено расширение «m2ts» (00001.m2ts и 00002.m2ts), хранят AV-клип. AV-клип является цифровым потоком в формате транспортного потока MPEG2 (стандарта сжатия движущегося изображения и звука). Цифровой поток формируется преобразованием оцифрованного видео и аудио (верхний уровень 1) в элементарный поток, состоящий из пакетов PES (верхний уровень 2), и преобразованием элементарного потока в пакеты TS (верхний уровень 3) и, подобным образом, преобразованием потока демонстрационной графики (PG) для субтитров или тому подобного и потока интерактивной графики (IG) для интерактивных целей (нижний уровень 1 и нижний уровень 2) в пакеты TS (нижний уровень 3), а затем заключительным мультиплексированием этих пакетов TS.First of all, the files for which the “m2ts” extension is assigned are explained. FIG. 3 shows a schematic structure of a file that is associated with the “m2ts” extension. Files, each of which is assigned the extension m2ts (00001.m2ts and 00002.m2ts), store the AV clip. An AV clip is a digital stream in the MPEG2 transport stream format (standard for moving picture and sound compression). The digital stream is generated by converting the digitized video and audio (upper level 1) into an elementary stream consisting of PES packets (upper level 2), and by converting the elementary stream into TS packets (upper level 3) and, similarly, converting the demo graphic stream (PG ) for subtitles or the like, and an interactive graphics (IG) stream for interactive purposes (lower level 1 and lower level 2) into TS packets (lower level 3), and then final multiplexing of these TS packets.

Последующее описывает видеопоток, аудиопоток, поток PG и поток IG.The following describes a video stream, an audio stream, a PG stream, and an IG stream.

<Видеопоток><Video Stream>

Видеопоток является потоком, формирующим движущиеся изображения кинофильма, и состоит из данных кинокадра изображений SD (со стандартным разрешением) и изображений HD (с высоким разрешением). Видеопотоком является видеопоток VC-1, формат MPEG4-AVC или MPEG2-Video. Когда видеопотоком является видеопоток в формате MPEG4-AVC, отметки времени, такие как PTS и DTS прикреплены к кинокадрам IDR, I, P и B, а управление воспроизведением выполняется в блоках кинокадров. Блок видеопотока, который является единицей для управления воспроизведением, с PTS и DTS, прикрепленными к нему, назван «блоком представления видео».A video stream is a stream forming moving images of a movie, and consists of movie data of SD images (with standard resolution) and HD images (with high resolution). A video stream is a VC-1 video stream, MPEG4-AVC or MPEG2-Video format. When the video stream is an MPEG4-AVC video stream, time stamps such as PTS and DTS are attached to the IDR, I, P, and B frames, and playback control is performed in the blocks of the frames. A video stream unit, which is a unit for controlling playback, with PTS and DTS attached to it, is called a “video presentation unit”.

<Аудиопоток><Audio Stream>

Аудиопоток является потоком для звуковой дорожки кинофильма, и форматы аудиопотока включают в себя формат аудиопотока LPCM, формат аудиопотока DTS-HD, формат аудиопотока DD/DD+ и формат аудиопотока DD/MLP. Отметки времени прикреплены к аудиокадрам в аудиопотоке, и управление воспроизведением выполняется в блоках аудиокадров. Блок аудиопотока, который является единицей для управления воспроизведением, с отметкой времени, прикрепленной к нему, назван «блоком представления аудио».An audio stream is a stream for a movie soundtrack, and audio stream formats include an LPCM audio stream format, a DTS-HD audio stream format, a DD / DD + audio stream format, and a DD / MLP audio stream format. Time stamps are attached to audio frames in an audio stream, and playback control is performed in blocks of audio frames. An audio stream unit, which is a unit for controlling playback, with a time stamp attached to it, is called an “audio presentation unit”.

<Поток PG><PG stream>

Потоком PG является графический поток, составляющий субтитр, записанный на языке. Есть множество потоков, которые соответствуют множеству языков, таких как английский, японский и французский соответственно. Поток PG состоит из функциональных сегментов, таких как: PCS (сегмент управления представлением); PDS (сегмент определения палитры); WDS (сегмент определения окна); ODS (сегмент определения объекта) и END (сегмент окончания набора отображения). ODS (сегмент определения объекта) является функциональным сегментом, который определяет графический объект, который является субтитром.A PG stream is a graphic stream constituting a subtitle recorded in a language. There are many threads that correspond to many languages, such as English, Japanese, and French, respectively. The PG stream consists of functional segments, such as: PCS (presentation control segment); PDS (Palette Definition Segment); WDS (window definition segment); ODS (object definition segment) and END (display set end segment). ODS (Object Definition Segment) is a functional segment that defines a graphic object that is a subtitle.

WDS (сегмент определения окна) является функциональным сегментом, который определяет количество битов графического объекта на экране. PDS (сегмент определения палитры) является функциональным сегментом, который определяет цвет при прорисовке графического объекта. PCS (сегмент управления представлением) является функциональным сегментом, который определяет управление страницами при отображении субтитра. Такое управление страницами включает в себя врезку/вырезку (Cut-In/Out), затемнение/осветление (Fade-In/Out), изменение цвета (Color Change), прокрутку (Scroll) и наложение/вытеснение (Wipe-In/Out). С помощью управления страницами посредством PCS возможно достичь эффекта отображения, например делая текущий субтитр уменьшающим яркость изображения при отображении следующего субтитра.WDS (window definition segment) is a functional segment that determines the number of bits of a graphic object on the screen. PDS (Palette Definition Segment) is a functional segment that defines color when drawing a graphic object. PCS (presentation control segment) is a functional segment that defines page management when displaying a subtitle. Such page management includes Cut-In / Out, Fade-In / Out, Color Change, Scroll, and Wipe-In / Out . By controlling the pages with PCS, it is possible to achieve a display effect, for example by making the current subtitle diminish the image brightness when the next subtitle is displayed.

<Поток IG><Stream IG>

Поток IG является графическим потоком для успешного выполнения интерактивного управления. Интерактивное управление, определенное потоком IG, является интерактивным управлением, которое совместимо с интерактивным управлением в устройстве воспроизведения DVD (многофункционального цифрового диска). Поток IG состоит из функциональных сегментов, таких как: ICS (сегмент интерактивной компоновки); EDS (сегмент определения палитры) и ODS (сегмент определения объектов). ODS (сегмент определения объекта) является функциональным сегментом, который определяет графический объект. Кнопки на интерактивном экране прорисовываются посредством множества таких графических объектов. PDS (сегмент определения палитры) является функциональным сегментом, который определяет цвет при прорисовке графического объекта. ICS (сегмент интерактивной компоновки) является функциональным сегментом, который выполняет изменения состояния, при котором состояние кнопки изменяется в соответствии с операцией пользователя. ICS включает в себя команду кнопки, которая приводится в исполнение, когда выполняется операция подтверждения по кнопке.The IG stream is a graphic stream for successful interactive management. The interactive control defined by the IG stream is an interactive control that is compatible with the interactive control in a DVD (multi-function digital disc) reproducing apparatus. The IG stream consists of functional segments, such as: ICS (interactive layout segment); EDS (segment definition palette) and ODS (segment definition objects). ODS (Object Definition Segment) is a functional segment that defines a graphic object. Buttons on the interactive screen are drawn through a variety of such graphic objects. PDS (Palette Definition Segment) is a functional segment that defines color when drawing a graphic object. ICS (Interactive Layout Segment) is a functional segment that performs state changes in which the state of the button changes according to the user's operation. ICS includes a button command that is executed when a button confirmation operation is performed.

Здесь AV-клип составлен из по меньшей мере одной «STC_Sequence» («последовательности STC»). «STC_Sequence» является секцией, в которой нет разрыва (разрыва системной временной развертки) в STC (синхросигнале системного времени), который является системной временной разверткой AV-потоков. Разрывом в STC является точка, в которой информацией о разрыве (признаком разрыва (discontinuity_indicator)) пакета PCR, несущего PCR (временную метку программы), указываемую ссылкой декодером для получения STC, является ON (включенное состояние).Here, the AV clip is composed of at least one "STC_Sequence" ("STC sequence"). "STC_Sequence" is a section in which there is no gap (rupture of the system time base) in the STC (system time clock signal), which is a system time base of the AV streams. The gap in the STC is the point at which the gap information (discontinuity_indicator) of the PCR packet carrying the PCR (program time stamp) indicated by the decoder link to receive the STC is ON (on state).

Фиг.4 показывает дополнительные подробности того, каким образом видео- и аудиопотоки хранятся в последовательности пакетов PES. Уровень 1 на фигуре показывает видеопоток, а уровень 3 показывает аудиопоток. Уровень 2 показывает последовательность пакетов PES. Как показано стрелками yy1, yy2, yy3 и yy4 на фигуре, можно видеть, что кинокадры IDR, кинокадры B и кинокадры P, которые являются многочисленными блоками представления видео в видеопотоке, поделены на многочисленные секции и каждая из отделенных секций хранится в одной из полезных нагрузок (V#1, V#2, V#3 и V#4 на фигуре) пакетов PES. Также может быть понятно, что каждый из аудиокадров, которые являются блоками представления аудио, составляющими аудиопоток, хранится в одной из полезных нагрузок (A#1 и A#2 на фигуре) пакетов PES, как показано стрелками aa1 и aa2.4 shows additional details of how video and audio streams are stored in a sequence of PES packets. Level 1 in the figure shows a video stream, and level 3 shows an audio stream. Level 2 shows the sequence of PES packets. As shown by the arrows yy1, yy2, yy3 and yy4 in the figure, it can be seen that IDR frames, B frames and P frames, which are multiple blocks for presenting a video in a video stream, are divided into multiple sections and each of the separated sections is stored in one of the payloads (V # 1, V # 2, V # 3 and V # 4 in the figure) PES packets. It may also be understood that each of the audio frames, which are audio presentation units constituting the audio stream, is stored in one of the payloads (A # 1 and A # 2 in the figure) of the PES packets, as shown by arrows aa1 and aa2.

Фиг.5 показывает, каким образом видео и аудио мультиплексируются в программный поток и транспортный поток. Нижняя часть фигуры показывает многочисленные пакеты PES (V#1, V#2, V#3, V#4, A#1 и A#2 на фигуре), которые содержат, сохраненные в них видео- и аудиопотоки. По фигуре видно, что видео- и аудиопотоки хранятся в разных пакетах PES. Верхняя часть показывает программный поток и транспортный поток, в которых хранятся пакеты PES, показанные в нижней части. Когда мультиплексируется в программный поток, каждый пакет PES умещается в одну пачку. Когда мультиплексируется в транспортный поток, пакет PES делится на секции, каждая из которых затем сохраняется в одной из полезных нагрузок многочисленных пакетов TS. Не формат программного потока, а формат транспортного потока используется для формата хранения BD-ROM. Общеизвестно, что видеопакеты PES, используемые для транспортного потока, хранят в себе один кадр или два спаренных поля, хотя фиг.5 не иллюстрирует такой случай.5 shows how video and audio are multiplexed into a program stream and a transport stream. The lower part of the figure shows numerous PES packets (V # 1, V # 2, V # 3, V # 4, A # 1 and A # 2 in the figure), which contain video and audio streams stored therein. The figure shows that the video and audio streams are stored in different PES packets. The upper part shows the program stream and the transport stream in which the PES packets shown in the lower part are stored. When multiplexed into a program stream, each PES packet fits in one packet. When multiplexed into a transport stream, a PES packet is divided into sections, each of which is then stored in one of the payloads of multiple TS packets. Not the program stream format, but the transport stream format is used for the BD-ROM storage format. It is well known that the PES video packets used for the transport stream contain one frame or two paired fields, although FIG. 5 does not illustrate such a case.

Фиг.6 показывает детализацию транспортного потока. Уровень 1 по фигуре показывает последовательность многочисленных пакетов TS, формирующих транспортный поток MPEG2, а уровень 2 показывает внутреннюю структуру пакета TS. Как показано на уровне 2, один пакет TS состоит из «заголовка», «поля адаптации» и «полезной нагрузки». Выносная линия th1 показывает вскрытые детали структуры заголовка пакета TS. Как показано выносной линией, заголовок пакета TS включает в себя: хранится «признак начала блока (признак начала блока полезной нагрузки (payload_unit_start_indicator))», указывающий начало пакета PES; «PID (идентификатор пакета (Packet Identifier))», указывающий тип элементарного потока, который мультиплексируется в транспортный поток; и «управление полем адаптации», указывающее, присутствует ли поле адаптации в пакете TS.6 shows a detail of a traffic stream. The layer 1 in the figure shows the sequence of multiple TS packets forming the MPEG2 transport stream, and layer 2 shows the internal structure of the TS packet. As shown in Layer 2, one TS packet consists of a “header”, “adaptation field”, and “payload”. Lead line th1 shows the exposed details of the TS packet header structure. As shown by the extension line, the TS packet header includes: a “block start flag (payload block start sign (payload_unit_start_indicator))” is stored indicating the start of the PES packet; “PID (Packet Identifier)”, indicating the type of elementary stream that is multiplexed into the transport stream; and “adaptation field management” indicating whether the adaptation field is present in the TS packet.

Выносная линия th2 показывает вскрытые детали внутренней структуры поля адаптации. Поле адаптации задано для пакета TS в случае, когда управление полем адаптации заголовка пакета TS установлено в «1». Точнее говоря, поле адаптации хранит в нем: «признак произвольного доступа (random_access_indicator)», указывающий, что пакет TS является началом видео- или аудиокадра и точкой входа; и «PCR (временную метку программы)», которая задает STC (синхросигнал системного времени) T-STD (целевого декодера транспортной системы).Lead line th2 shows exposed details of the internal structure of the adaptation field. The adaptation field is set for the TS packet when the control of the adaptation field of the TS packet header is set to “1”. More precisely, the adaptation field stores in it: “random access flag (random_access_indicator)”, indicating that the TS packet is the beginning of the video or audio frame and the entry point; and “PCR (Program Timestamp),” which defines the STC (system time clock) of the T-STD (Target Transport Decoder).

Фиг.7 показывает внутренние структуры пакета PAT и пакета PMT. Эти пакеты описывают программную структуру транспортного потока.7 shows the internal structures of a PAT packet and a PMT packet. These packages describe the software structure of the transport stream.

Выносная линия hm1 фигуры показывает вскрытые детали структуры пакета TS с PID=0 в транспортном потоке. Такой пакет TS назван пакетом PAT (таблицы связей программы) и указывает программную структуру полного транспортного потока. PID пакета PAT всегда является «0». В пакете PAT хранится PAS (секция связей программы). Выносная линия hm2 показывает вскрытые детали внутренней структуры PAS. Как показано выносной линией, PAS показывает соответствие между program_number (номером программы) и таблицей карты программы (PID PMT). Выносная линия hm3 показывает вскрытые детали структуры пакета TS с PID=0×100, присутствующие в транспортном потоке. Такой пакет TS назван пакетом PMT. Как показано выносной линией hm4, заголовок пакета TS включает в себя: «тип потока», указывающий тип потока, включенного в программу, соответствующую PMS; и «элементарный PID», которым является PID потока. Согласно примеру по фигуре программа с номером #1 программы содержит PMT с PID=0×100, а видео MPEG2 с PID=0×200 и аудио ADTS с PID=0×201 составляют программу с номером #1 программы. Программа в транспортном потоке, а также PID потока, образующего транспортный поток, и тип потока могут быть найдены получением PID у PMT из PAT, чей PID всегда является 0, затем получением пакета PMT согласно PID у PMT и обращением к PMS.The lead line hm1 of the figure shows the exposed details of the TS packet structure with PID = 0 in the transport stream. Such a TS packet is called a PAT (program link table) packet and indicates the program structure of the full transport stream. The PID of the PAT packet is always "0". The PAT package contains the PAS (program links section). The lead line hm2 shows the exposed details of the internal structure of the PAS. As shown by the extension line, the PAS shows the correspondence between program_number (program number) and the program map table (PID PMT). Extension line hm3 shows the opened details of the TS packet structure with PID = 0 × 100 present in the transport stream. Such a TS packet is called a PMT packet. As shown by the extension line hm4, the TS packet header includes: “stream type” indicating the type of stream included in the program corresponding to the PMS; and an “elementary PID”, which is the stream PID. According to the example in the figure, a program with program number # 1 contains a PMT with PID = 0 × 100, and MPEG2 video with PID = 0 × 200 and ADTS audio with PID = 0 × 201 constitute a program with program number # 1. The program in the transport stream, as well as the PID of the stream forming the transport stream, and the type of stream can be found by obtaining the PID from PMT from PAT, whose PID is always 0, then receiving the PMT packet according to the PID from PMT and accessing the PMS.

Затем пояснено, каким образом AV-клип, имеющий вышеописанную структуру, записывается на BD-ROM. Фиг.8 показывает, каким последовательностям операций подвергаются пакеты TS, составляющие AV-клип, перед тем как они записываются на BD-ROM; Уровень 1 фигуры показывает пакеты TS, составляющие AV-клип.Then, it is explained how an AV clip having the above structure is recorded on the BD-ROM. Fig. 8 shows what process sequences TS packets constituting the AV clip are subjected to before being recorded to the BD-ROM; Level 1 of the figure shows TS packets constituting the AV clip.

Как показано на уровне 2 по фиг.8, 4-байтный дополнительный заголовок TS (TS_extra_header) (заштрихованные участки на фигуре), прикреплен к каждому 188-байтному пакету TS, составляющему AV-клип, для формирования каждого 192-байтного исходного пакета. Дополнительный заголовок TS (TS_extra_header) включает в себя временную отметку поступления (Arrival_Time_Stamp), которая является информацией, указывающей момент времени, в который пакет TS вводится в декодер. Причина для прикрепления заголовка ATS к каждому пакету TS для формирования потока состоит в том, чтобы назначать каждому пакету TS момент времени, в который пакет TS вводится в декодер (STD). При цифровом вещании транспортный поток интерпретируется как поток, имеющий фиксированную битовую скорость. Поэтому пустые пакеты TS, названные нулевыми (NULL) пакетами, также мультиплексируются совместно, чтобы формировать транспортный поток, так что транспортный поток широковещательно передается на фиксированной битовой скорости. Однако в случае, где потоки записаны на оптическом диске или другом носителе записи, имеющем ограниченную емкость записи, такой способ записи с фиксированной битовой скоростью является недостатком, так как он непроизводительно расходует емкость. Поэтому нулевые (NULL) пакеты не записываются на BD-ROM. Для того чтобы удовлетворять способу записи с переменной битовой скоростью, ATS прикрепляется к каждому пакету TS, а затем транспортный поток записывается на BD-ROM. Использование ATS предусматривает восстановление момента времени ввода декодера для каждого пакета TS и, таким образом, может удовлетворять способу записи с переменной битовой скоростью. В дальнейшем пара из заголовка ATS и пакета TS названа исходным пакетом.As shown at level 2 in FIG. 8, a 4-byte TS additional header (TS_extra_header) (shaded portions in the figure) is attached to each 188-byte TS packet constituting the AV clip to form each 192-byte source packet. The optional TS header (TS_extra_header) includes an arrival time stamp (Arrival_Time_Stamp), which is information indicating the point in time at which the TS packet is input to the decoder. The reason for attaching the ATS header to each TS packet to form a stream is to assign each TS packet a point in time at which the TS packet is input to the decoder (STD). In digital broadcasting, a transport stream is interpreted as a stream having a fixed bit rate. Therefore, empty TS packets, called NULL packets, are also multiplexed together to form a transport stream, so that the transport stream is broadcast at a fixed bit rate. However, in the case where the streams are recorded on an optical disc or other recording medium having a limited recording capacity, such a fixed bit rate recording method is a drawback, since it consumes capacity unproductively. Therefore, null (NULL) packets are not written to the BD-ROM. In order to satisfy the variable bit rate recording method, the ATS is attached to each TS packet, and then the transport stream is recorded on the BD-ROM. Using ATS involves recovering a decoder input timing for each TS packet, and thus can satisfy a variable bit rate recording method. Subsequently, the pair from the ATS header and the TS packet is called the source packet.

AV-клип, показанный на уровне 3, включает в себя одну или более «ATC_Sequence» («последовательностей ATC»), каждая из которых является последовательностью исходных пакетов. «ATC_Sequence» является последовательностью исходных пакетов, где синхросигналы времени поступления (Arrival_Time_Clock) указанные ссылкой временными отметками поступления (Arrival_Time_Stamp), включенными в последовательность ATC (ATC_Sequence), не включают в себя «разрыв временной развертки поступления». Другими словами, «ATC_Sequence» является последовательностью исходных пакетов, где синхросигналы времени поступления (Arrival_Time_Clock), указанные ссылкой временными метками поступления (Arrival_Time_Stamp), включенными в последовательность ATC (ATC_Sequence), являются непрерывными.The AV clip shown at level 3 includes one or more “ATC_Sequence” (“ATC sequences”), each of which is a sequence of source packets. “ATC_Sequence” is a sequence of source packets where the arrival time clock (Arrival_Time_Clock) referenced by the arrival timestamps (Arrival_Time_Stamp) included in the ATC sequence (ATC_Sequence) does not include an “arrival timeline break”. In other words, “ATC_Sequence” is a sequence of source packets where the arrival time clocks (Arrival_Time_Clock) indicated by the reference timestamps (Arrival_Time_Stamp) included in the ATC sequence (ATC_Sequence) are continuous.

Такие последовательности ATC (ATC_Sequence) образуют AV-клип и записываются на BD-ROM с именем «xxxxx.m2ts» файла.Such ATC sequences (ATC_Sequence) form an AV clip and are recorded on a BD-ROM with the name "xxxxx.m2ts" of the file.

AV-клип, как имеет место при нормальных компьютерных файлах, делится на один или более файловых экстентов, которые затем записываются в областях на BD-ROM. Уровень 4 показывает, каким образом AV-клип записывается на BD-ROM. На уровне 4 каждый файловый экстент, составляющий файл, имеет длину данных, которая равна или больше, чем предопределенная длина, названная Sextent.An AV clip, as is the case with normal computer files, is divided into one or more file extents, which are then recorded in areas on the BD-ROM. Level 4 shows how the AV clip is recorded on the BD-ROM. At level 4, each file extent that makes up a file has a data length that is equal to or greater than a predefined length called Sextent.

Sextent является минимальной длиной данных каждого файлового пространства, где AV-клип разделен на множество файловых экстентов, которые должны записываться.Sextent is the minimum data length of each file space, where the AV clip is divided into many file extents to be recorded.

Период времени, требуемый, чтобы оптическая головка считывания информации переходила к ячейке на BD-ROM, получается согласно следующему равенству:The time period required for the optical head to read information passed to the cell on the BD-ROM is obtained according to the following equation:

Tjump=Taccess + Toverhead.Tjump = Taccess + Toverhead.

«Taccess» («T доступа») является требуемым временем, которое соответствует расстоянию перехода (расстоянию целевого физического адреса перехода)."Taccess" ("Access T") is the required time, which corresponds to the distance of the transition (the distance of the target physical address of the transition).

Пакеты TS, считываемые с BD-ROM, сохраняются в буфере, названном буфером чтения, а затем выводятся в декодер. «Toverhead» («T служебных данных») получается согласно следующему равенству, когда ввод в буфер чтения выполняется с битовой скоростью, названной «Rud», а количество секторов в блоке ECC представлено посредством Secc:TS packets read from the BD-ROM are stored in a buffer called a read buffer, and then output to a decoder. “Toverhead” (“T overhead”) is obtained according to the following equality when the input to the read buffer is performed at a bit rate called “Rud” and the number of sectors in the ECC block is represented by Secc:

Toverhead ≤ (2 × Secc × 8) / Rud=20 мс.Toverhead ≤ (2 × Secc × 8) / Rud = 20 ms.

Пакеты TS, считанные с BD-ROM, сохраняются в буфере чтения в состоянии исходных пакетов, а затем выдаются в декодер на скорости передачи, названной «TS_Recording_rate» («скоростью записи TS»).The TS packets read from the BD-ROM are stored in the read buffer in the state of the source packets, and then are output to the decoder at a bit rate called “TS_Recording_rate” (“TS write speed”).

Чтобы сохранять скорость передачи у скорости записи TS (TS_Recording_rate), в то время как пакеты подаются в декодер, необходимо, чтобы в течение Tjump пакеты TS непрерывно выводились из буфера чтения в декодер. Здесь исходные пакеты, а не пакеты TS, выводятся из буфера чтения. Как результат, когда отношением пакета TS к исходному пакету по размеру является 192/188, необходимо, чтобы в течение Tjump исходные пакеты непрерывно выводились из буфера чтения на скорости передачи «192/188 × TS_Recording_rate».In order to keep the bit rate at the TS write speed (TS_Recording_rate) while the packets are being sent to the decoder, it is necessary that during Tjump the TS packets are continuously output from the read buffer to the decoder. Here, source packets, not TS packets, are output from the read buffer. As a result, when the ratio of the TS packet to the original packet in size is 192/188, it is necessary that during Tjump the source packets are continuously output from the read buffer at a transmission speed of “192/188 × TS_Recording_rate”.

Соответственно, объем занятой емкости буфера у буфера чтения, который не вызывает отрицательного переполнения, изображается следующим равенством:Accordingly, the volume of the occupied buffer capacity of the read buffer, which does not cause negative overflow, is represented by the following equality:

Boccupied≥(Tjump/1000×8)×((192/188)×TS_Recording_rate).Boccupied≥ (Tjump / 1000 × 8) × ((192/188) × TS_Recording_rate).

Скорость ввода в буфер чтения представлена посредством Rud, а скорость вывода из буфера чтения представлена посредством TS_Recording_rate × (192/188). Поэтому скорость заполнения буфера чтения получается выполнением «(скорость ввода) - (скорость вывода)» и, таким образом, получается согласно «Rud - TS_Recording_rate) × (192/188)».The write speed to the read buffer is represented by Rud, and the output speed from the read buffer is represented by TS_Recording_rate × (192/188). Therefore, the speed of filling the read buffer is obtained by executing "(input speed) - (output speed)" and, thus, it is obtained according to "Rud - TS_Recording_rate) × (192/188)".

Время «Tx», требуемое для заполнения буфера чтения согласно «Boccupied» («B занятый»), получается согласно следующему равенству:The time “Tx” required to fill the read buffer according to “Boccupied” (“B busy”) is obtained according to the following equation:

Tx=Boccupied/(Rud - TS_Recording_rate × (192/188)).Tx = Boccupied / (Rud - TS_Recording_rate × (192/188)).

При чтении с BD-ROM необходимо продолжать вводить пакеты TS с битовой скоростью Rud в течение периода «Tx» времени. Как результат, минимальная длина Sextent данных для экстента, когда AV-клип поделен на множество файловых экстентов, которые должны записываться, получается согласно следующим равенствам:When reading from a BD-ROM, it is necessary to continue to introduce TS packets with a bit rate of Rud for a “Tx” time period. As a result, the minimum length of the Sextent data for the extent, when the AV clip is divided into many file extents that must be recorded, is obtained according to the following equations:

Sextent=Rud×Tx=Rud×Boccupied/(Rud-TS_Recording_ratex(192/188))≥Rud×(Tjump/1000×8)×(192/188)×TS_Recording_rate)/(Rud-TS_Recording_rate×(192/188))≥(Rud×Tjump/1000×8)×TS_Recording_rate×192Sextent = Rud × Tx = Rud × Boccupied / (Rud-TS_Recording_ratex (192/188)) ≥Rud × (Tjump / 1000 × 8) × (192/188) × TS_Recording_rate) / (Rud-TS_Recording_rate × (192/188) ) ≥ (Rud × Tjump / 1000 × 8) × TS_Recording_rate × 192

/(Rud×188-TS_Recording_rate×192)./ (Rud × 188-TS_Recording_rate × 192).

ОтсюдаFrom here

Sextent≥(Tjump×Rud/1000×8)×(TS_Recording_rate×192/(Rud×188-TS_Recording_rate×192)).Sextent≥ (Tjump × Rud / 1000 × 8) × (TS_Recording_rate × 192 / (Rud × 188-TS_Recording_rate × 192)).

Если каждый файловый экстент, составляющий AV-клип, имеет длину данных, равную или большую, чем Sextent, которая рассчитана в качестве значения, которое не вызывает отрицательного переполнения декодера, даже если файловые экстенты, составляющие AV-клип, расположены на BD-ROM по отдельности, пакеты TS выдаются в декодер непрерывно, так что данные считываются непрерывно во время воспроизведения.If each file extent that makes up the AV clip has a data length equal to or greater than Sextent, which is calculated as a value that does not cause negative decoder overflow, even if the file extents that make up the AV clip are located on the BD-ROM by individually, TS packets are continuously output to the decoder so that data is read continuously during playback.

Минимальным составляющим блоком вышеупомянутого файлового экстента является выровненный блок (объемом данных 6 кбайт), который состоит из группы в 32 исходных пакета. Соответственно, размер файла потока (XXXX.AVClip) на BD всегда кратен 6 кбайтам.The smallest constituent block of the aforementioned file extent is a aligned block (6 KB data volume), which consists of a group of 32 source packets. Accordingly, the size of the stream file (XXXX.AVClip) on the BD is always a multiple of 6 kbytes.

Фиг.9 показывает внутреннюю структуру «выровненного блока». Выровненный блок составляется из 32 исходных пакетов, а затем записывается в набор из трех следующих друг за другом секторов. Группой из 32 исходных пакетов являются 6144 байт (= 32 × 192), которые эквивалентны размеру трех секторов (2048 × 3). В отношении секторов на BD-ROM код исправления ошибок закрепляется за каждыми 32 исходными пакетами, чтобы, тем самым, формировать блок ECC. Коль скоро осуществление доступа к BD-ROM в единицах выровненных блоках, устройство воспроизведения может получать 32 полных исходных пакета. В этом заключается описание последовательности операций записи AV-клипа на BD-ROM. AV-клип, который записан на BD-ROM и вместе с которым мультиплексированы видеопотоки высокого разрешения, в дальнейшем указывается ссылкой как «MainClip» («основной клип»). С другой стороны, AV-клип, который сохранен на локальном запоминающем устройстве и воспроизводится с основным клипом, назван «SubClip» («вспомогательным клипом»).Fig.9 shows the internal structure of the "aligned block". The aligned block is composed of 32 source packets, and then written to a set of three successive sectors. A group of 32 source packets are 6144 bytes (= 32 × 192), which are equivalent to the size of three sectors (2048 × 3). For sectors on the BD-ROM, an error correction code is assigned to every 32 source packets to thereby form an ECC block. Once access to the BD-ROM is in units of aligned blocks, the playback device can receive 32 complete source packets. This is a description of the process for recording an AV clip on a BD-ROM. An AV clip that is recorded on a BD-ROM and with which high-resolution video streams are multiplexed is hereinafter referred to as “MainClip” (“main clip”). On the other hand, the AV clip, which is stored on the local storage device and played back with the main clip, is called “SubClip” (“auxiliary clip”).

Частичный транспортный поток получается демультиплексированием основного клипа, записанного на BD-ROM. Частичный транспортный поток соответствует каждому элементарному потоку. Частичный транспортный поток, полученный демультиплексированием основного клипа и соответствующий каждому элементарному потоку, назван «Primary TS» («первичным TS»).A partial transport stream is obtained by demultiplexing the main clip recorded on the BD-ROM. A partial transport stream corresponds to each elementary stream. The partial transport stream obtained by demultiplexing the main clip and corresponding to each elementary stream is called “Primary TS” (“primary TS”).

<Структура 2 BD-ROM: информация о клипах><Structure 2 BD-ROM: information about the clips>

Следующими описаны файлы, за которыми закреплено расширение «clip». Файлы (00001.clpi и 00002.clpi), за которыми закреплено расширение «clpi», хранят информацию о клипах. Информацией о клипах является управляющая информация о каждом AV-клипе. Фиг.10 показывает внутреннюю структуру информации о клипах. Как показано на левой стороне фигуры, информация о клипах включает в себя:The following are the files that are assigned the clip extension. Files (00001.clpi and 00002.clpi), which are assigned the extension "clpi", store information about the clips. The clip information is control information about each AV clip. 10 shows an internal structure of clip information. As shown on the left side of the figure, the clip information includes:

i) «ClipInfo()», хранящую в ней информацию касательно AV-клипа;i) “ClipInfo ()”, storing in it information regarding the AV clip;

ii) «Sequence Info()», хранящую в ней информацию касательно последовательности ATC и последовательности STC;ii) a “Sequence Info ()" storing information regarding an ATC sequence and an STC sequence therein;

iii) «Program Info()», хранящую в ней информацию касательно программной последовательности иiii) “Program Info ()”, which stores information regarding the program sequence and

iv) «Characteristic Point Info(CPI())» («информация о характеристических точках (CPI())»).iv) “Characteristic Point Info (CPI ())” (“Characteristic Point Information (CPI ())”).

«ClipInfo» («информация клипа») включает в себя «application_type» («тип приложения»), указывающий тип приложения AV-клипа, указываемого ссылкой информацией о клипах. Указание ссылкой на информацию клипа предоставляет возможность идентификации того, является ли типом приложения основной клип или вспомогательный клип, содержится ли видео или содержатся неподвижные изображения (демонстрация слайдов). В дополнение, вышеупомянутая скорость записи TS (TS_recording_rate) описана в информации клипа.“ClipInfo” (“clip information”) includes “application_type” (“application type”) indicating the application type of the AV clip indicated by the clip information link. Pointing to clip information provides an opportunity to identify whether the application type is a main clip or a sub clip, whether video is contained or still images are contained (slide show). In addition, the aforementioned TS recording speed (TS_recording_rate) is described in the clip information.

Информация о последовательности (Sequence Info) является информацией касательно одной или более STC-последовательностей и ATC-последовательностей, содержащихся в AV-клипе. Причина, по которой предусмотрена эта информация, состоит в том, чтобы предварительно уведомлять устройство воспроизведения о разрыве системной временной развертки и разрыве временной развертки поступления. То есть, если присутствует такой разрыв, есть вероятность, что PTS и ATS, которые имеют одно и то же значение, имеют место в AV-клипе. Это может быть причиной дефектного воспроизведения. Информация о последовательности предусмотрена, чтобы указывать, откуда и докуда, в транспортном потоке, STC или ATC являются последовательными.Sequence Info is information regarding one or more STC sequences and ATC sequences contained in an AV clip. The reason this information is provided is to preliminarily notify the playback device of a system time base gap and a time gap gap of the receipt. That is, if there is such a gap, it is likely that PTS and ATS, which have the same value, take place in the AV clip. This may cause defective playback. Sequence information is provided to indicate where and from where, in the transport stream, the STC or ATC are sequential.

Информация о программе (Program Info) является информацией, которая указывает секцию (названную «программной последовательностью») программы, где контенты являются неизменными. Здесь «программой» является группа элементарных потоков, которая имеет общую временную ось для синхронного воспроизведения. Причина, по которой предусмотрена информация о программе, состоит в том, чтобы предварительно уведомлять устройство воспроизведения о точке, в которой изменяются контенты программ. Здесь должно быть отмечено, что точка, в которой изменяются контенты программ, например, является точкой, в которой изменяется PID видеопотока, или точкой, в которой тип видеопотока изменяется с SDTV (телевидения со стандартным разрешением) на HDTV (телевидение с высоким разрешением).Program Information (Program Info) is information that indicates the section (called the "program sequence") of the program, where the contents are unchanged. Here, a “program” is a group of elementary streams that has a common time axis for synchronous playback. The reason that the program information is provided is to notify the playback device of the point at which the contents of the programs change in advance. It should be noted here that the point at which the contents of the programs change, for example, is the point at which the PID of the video stream changes, or the point at which the type of video stream changes from SDTV (standard definition television) to HDTV (high definition television).

Следующей описана информация о характерной точке. Выносная линия cu2 на фиг.9 показывает раскрытие структуры CPI. Как указано выносной линией cu2, CPI состоит из Ne частей карт EP для PID одного потока (EP_map_for_one_stream_PID) (с карты EP для PID[0] одного потока (EP_map_for_one_stream_PID[0]) по карту EP для PID[Ne-1] одного потока (EP_map_for_one_stream_PID[Ne-1]). Эти карты EP для PID одного потока (EP_map_for_one_stream_PID) являются картами EP (EP_map) элементарных потоков, которые принадлежат AV-клипу. Карта EP (EP_map) является информацией, которая указывает, в связи с временем начала (PTS_EP_start), номер пакета (SPN_EP_start) в позиции входа, где блок доступа присутствует в одном элементарном потоке. Выносная линия cu3 на фигуре указывает раскрытие внутренней структуры карты EP для PID одного потока (EP_map_for_one_stream_PID).The following describes the characteristic point information. Lead line cu2 in FIG. 9 shows the disclosure of the CPI structure. As indicated by the cu2 extension line, the CPI consists of Ne parts of the EP cards for the PID of one stream (EP_map_for_one_stream_PID) (from the EP card for PID [0] of one stream (EP_map_for_one_stream_PID [0]) on the EP card for the PID [Ne-1] of one stream ( EP_map_for_one_stream_PID [Ne-1]). These EP cards for the PID of one stream (EP_map_for_one_stream_PID) are EP cards (EP_map) of elementary streams that belong to the AV clip. The EP card (EP_map) is information that indicates in connection with the start time ( PTS_EP_start), packet number (SPN_EP_start) at the entry position, where the access unit is present in one elementary stream. Extension line cu3 in the figure indicates the rytie inner EP map patterns for one stream PID (EP_map_for_one_stream_PID).

Из раскрытия понятно, что карта EP для PID одного потока (EP_map_for_one_stream_PID) состоит из Ne частей EP_High (с EP_High(0) по EP_High(Nc-l)) и Nf частей EP_Low (с EP_Low(0) по EP_Low(Nf-l)). Здесь EP_High играет роль указания самых старших битов у SPN_EP_start и PTS_EP_start блока доступа (не относящегося к IDR I-кинокадра, IDR-кинокадра), а EP_Low играет роль указания самых младших битов у SPN_EP_start и PTS_EP_start блока доступа (не относящегося к IDR I-кинокадра, IDR-кинокадра).From the disclosure it is clear that the EP card for the PID of one stream (EP_map_for_one_stream_PID) consists of Ne parts EP_High (from EP_High (0) to EP_High (Nc-l)) and Nf parts EP_Low (from EP_Low (0) to EP_Low (Nf-l) ) Here EP_High plays the role of indicating the most significant bits in the SPN_EP_start and PTS_EP_start of the access unit (not related to the IDR of the I-frame, IDR-movie frame), and EP_Low plays the role of indicating the least significant bits in the SPN_EP_start and PTS_EP_start of the access unit (not related to the IDR I-kin , IDR movie frame).

Выносная линия cu4 на фигуре указывает раскрытие внутренней структуры EP_High. Как указано выносной линией cu4, EP_High(i) состоит из: «ref_to_EP_Low_id[i]» («ссылки на EP_Low_id[i]»), которая является значением ссылки на EP_Low; «PTS_EP_High [i]», который указывает самые старшие биты PTS блока доступа (не относящегося к IDR I-кинокадра, IDR-кинокадра); и «SPN_EP_High[i]», который указывает самые старшие биты SPN блока доступа (не относящегося к IDR I-кинокадра, IDR-кинокадра). Здесь «i» - идентификатор данного EP_High.Lead line cu4 in the figure indicates the disclosure of the internal structure of EP_High. As indicated by the extension line cu4, EP_High (i) consists of: "ref_to_EP_Low_id [i]" ("reference to EP_Low_id [i]"), which is the value of the link to EP_Low; "PTS_EP_High [i]", which indicates the most significant bits of the PTS of the access unit (not related to the IDR of the I-movie frame, IDR-movie frame); and "SPN_EP_High [i]", which indicates the most significant bits of the SPN of the access unit (not related to the IDR of the I-movie frame, IDR-movie frame). Here “i” is the identifier of this EP_High.

Выносная линия cu5 на фигуре указывает раскрытие структуры EP_Low. Как указано выносной линией cu5, EP_Low(i) состоит из: «is_angle_change_point (EP_Low_id)» («является точкой изменения ракурса (EP_Low_id)», которое указывает, является ли соответствующий блок доступа IDR-кинокадром; «I_end_position_offset (EP_Low_id)» («смещение конечного положения I (EP_Low_id)»), которое указывает размер соответствующего блока доступа; «PTS_EP_Low(EP_Low_id)», который указывает самые младшие биты PTS блока доступа (не относящегося к IDR I-кинокадра, IDR-кинокадра); и «SPN_EP_Low(EP_Low_id)», который указывает самые младшие биты SPN блока доступа (не относящегося к IDR I-кинокадра, IDR-кинокадра). Здесь «EP_Low_id» - идентификатор для идентификации данного EP_Low.Lead line cu5 in the figure indicates the disclosure of the EP_Low structure. As indicated by the cu5 extension line, EP_Low (i) consists of: “is_angle_change_point (EP_Low_id)” (“is the angle change point (EP_Low_id)”, which indicates whether the corresponding access unit is an IDR movie frame; “I_end_position_offset (EP_Low_id)” (“ end position offset I (EP_Low_id) "), which indicates the size of the corresponding access unit;" PTS_EP_Low (EP_Low_id) ", which indicates the least significant bits of the PTS of the access unit (not related to the IDR of the I-movie frame, IDR-movie frame); and" SPN_EP_Low ( EP_Low_id) ", which indicates the least significant bits of the SPN of the access unit (not related to the IDR of the I-movie frame, IDR-movie frame). Here l "EP_Low_id" is the identifier for identifying this EP_Low.

<Пояснение 2 информации о клипах: карта EP><Explanation 2 of the clip information: EP card>

Здесь карта EP (EP_map) пояснена с использованием отдельного примера. Фиг.11 показывает настройки карты EP (EP_map) для видеопотока кинофильма; Уровень 1 показывает множество кинокадров (IDR-кинокадр, I-кинокадр, B-кинокадр и P-кинокадр, определенные в MPEG4-AVC), скомпонованных в порядке отображения. Уровень 2 показывает временную ось для кинокадров. Уровень 4 указывает последовательность пакетов TS на BD-ROM, а уровень 3 указывает настройки карты EP (EP_map).Here, the EP map (EP_map) is explained using a separate example. 11 shows the settings of an EP card (EP_map) for a movie video stream; Level 1 shows a plurality of motion pictures (IDR motion picture, I-motion picture, B-motion picture and P-motion picture defined in MPEG4-AVC) arranged in display order. Level 2 shows the time axis for movie frames. Level 4 indicates the sequence of TS packets on the BD-ROM, and level 3 indicates the settings of the EP card (EP_map).

Здесь допустим, что на временной оси уровня 2 IDR-кинокадр или I-кинокадр присутствует в каждый момент времени с t1 по t7. Интервал между соседними из моментов времени с t1 по t7 составляет приблизительно одну секунду. Карта EP (EP_map), используемая для кинофильма, настроена, чтобы указывать с t1 по t7 с временами начала (PTS_EP_start) и указывать позиции входа (SPN_EP_start) в связи с временами начала.Here, suppose that on the time axis of level 2, an IDR film frame or I-film frame is present at each time instant from t1 to t7. The interval between adjacent times t1 through t7 is approximately one second. The EP card (EP_map) used for the movie is configured to indicate t1 through t7 with start times (PTS_EP_start) and indicate entry positions (SPN_EP_start) in relation to start times.

<Информация списка воспроизведения><Playlist Information>

Следующей описана информация списка воспроизведения. Файл (00001.mpls), за которым закреплено расширение «mpls», является файлом, хранящим в нем информацию списка воспроизведения (PL).The following describes playlist information. The file (00001.mpls), which is assigned the extension "mpls", is a file that stores playlist (PL) information in it.

Фиг.12 показывает структуру данных информации списка воспроизведения. Как указано выносной линией mp1 на фигуре, информация списка воспроизведения включает в себя: информацию об основном пути (MainPath ()), которая определяет основной путь; информацию метки списка воспроизведения (PlayListMark()), которая определяет раздел; и другие данные расширения (Extension Data).12 shows a data structure of playlist information. As indicated by the extension line mp1 in the figure, the information of the playlist includes: information about the main path (MainPath ()), which defines the main path; playlist label information (PlayListMark ()) that defines the section; and other extension data.

<Разъяснение 1 информации списка воспроизведения: информация об основном пути><Clarification 1 of the information of the playlist: information about the main path>

Прежде всего, описан основной путь. Основным путем является путь воспроизведения, который определен исходя из видеопотока, такого как основное видео, и аудиопотока.First of all, the main path is described. The main path is the playback path, which is determined based on the video stream, such as the main video, and the audio stream.

Как указано стрелкой mp1, основной путь определен множеством частей информации об элементе воспроизведения: с информации #1 об элементе воспроизведения по информацию #m об элементе воспроизведения. Информация об элементе воспроизведения определяет одну или более логических секций воспроизведения, которые составляют основной путь. Выносная линия hs1 на фигуре указывает раскрытие структуры информации об элементе воспроизведения. Как указано выносной линией hs1, информация об элементе воспроизведения состоит из: «Clip_Information_file_name» («имени файла информации о клипах»), которое указывает имя файла информации секции воспроизведения AV-клипа, которому принадлежат точка входа (IN) и точка выхода (OUT) секции воспроизведения; «Clip_codec_identifier» («идентификатора кодека клипа»), который указывает способ кодирования AV-клипа; «is_multi_angle» («является многоракурсной»), которая указывает, является или нет элемент воспроизведения многоракурсным; «connection_condition» («условия соединения»), которое указывает, следует или нет соединять текущий элемент воспроизведения и предыдующий элемент воспроизведения безразрывным образом; «ref_to_STC_id [0]» («ссылку на STC_id [0]»), которая уникально указывает последовательность STC (STC_Sequence) нацеленную элементом воспроизведения; «In_time» («время начала»), которое является информацией о времени, указывающей начальный момент секции воспроизведения; «Out_time» («время окончания»), которое является информацией о времени, указывающей конечный момент секции воспроизведения; «UO_mask_table» («таблицу масок операций пользователя»), которая указывает, какая операция пользователя должна маскироваться элементом воспроизведения; «PlayItem_random_access_flag» («признак произвольного доступа к элементу воспроизведения»), который указывает, следует ли допускать произвольный доступ к средней точке в элементе воспроизведения; «Still_mode» («режим снимка»), который указывает, следует ли продолжать неподвижное отображение последнего кинокадра после того, как воспроизведение элемента воспроизведения заканчивается; и «STN_table» («таблицу STN»). Среди этих информация о времени «In_time» («времени начала»), указывающая начальную точку секции воспроизведения, и информация о времени «Out_time» («времени окончания»), указывающая конечную точку секции воспроизведения, составляют путь воспроизведения. Информация о пути воспроизведения состоит из «In_time» («времени начала») и «Out_time» («времени окончания»).As indicated by the arrow mp1, the main path is defined by many pieces of information about the playitem: from information # 1 about the playitem to information #m about the playitem. Information about the playitem defines one or more logical playback sections that make up the main path. Extension line hs1 in the figure indicates the disclosure of the structure of information about the playitem. As indicated by the extension line hs1, information about the playitem consists of: “Clip_Information_file_name” (“name of the file of information about the clips”), which indicates the name of the information file of the playback section of the AV clip, which belongs to the entry point (IN) and exit point (OUT) playback sections; “Clip_codec_identifier”, which indicates the encoding method of the AV clip; "Is_multi_angle" ("is multi-angle"), which indicates whether or not the play item is multi-angle; “Connection_condition”, which indicates whether or not to connect the current playitem and the previous playitem in a seamless manner; "Ref_to_STC_id [0]" ("reference to STC_id [0]"), which uniquely indicates the sequence STC (STC_Sequence) targeted by the playitem; "In_time" ("start time"), which is time information indicating the starting point of the playback section; “Out_time”, which is time information indicating an end point of a playback section; “UO_mask_table” (“user operation mask table”), which indicates which user operation should be masked by a playitem; "PlayItem_random_access_flag" ("sign of random access to the playitem"), which indicates whether to allow random access to the midpoint in the playitem; “Still_mode” (“snapshot mode”), which indicates whether to continue the still display of the last movie frame after the playback of the playback item ends; and “STN_table” (“STN table”). Among these, the In_time time information (“start time”) indicating the start point of the playback section, and the “Out_time” time information (“start time”) indicating the end point of the playback section constitute the playback path. Information about the playback path consists of "In_time" ("start time") and "Out_time" ("end time").

Фиг.13 показывает взаимосвязи между информацией об AV-клипе и списка воспроизведения. Уровень 1 показывает временную ось информации списка воспроизведения (временную ось списка воспроизведения). Уровни со 2 по 5 показывают видеопоток, который указывается ссылкой картой EP (EP_map).13 shows the relationship between the AV clip information and the playlist. Level 1 shows the time axis of the playlist information (time axis of the playlist). Levels 2 through 5 show the video stream, which is indicated by the reference map EP (EP_map).

Информация списка воспроизведения включает в себя две части информации об элементе воспроизведения: информацию #1 об элементе воспроизведения и информацию #2 об элементе воспроизведения. Две секции воспроизведения определены посредством «In_time» и «Out_time» («времени начала» и «времени окончания»), включенных в информацию #1 об элементе воспроизведения и информацию #2 об элементе воспроизведения соответственно. Когда компонуются эти секции воспроизведения, определяется временная ось, которая отлична от временной оси AV-клипа. Это временная ось списка воспроизведения, показанная на уровне 1. Таким образом, возможно определить путь воспроизведения, который отличен от AV-клипа, посредством определения информации об элементе воспроизведения.The playlist information includes two pieces of information about the playitem: information # 1 about the playitem and information # 2 about the playitem. Two playback sections are defined by “In_time” and “Out_time” (“start time” and “end time”) included in the information # 1 about the playitem and information # 2 about the playitem, respectively. When these playback sections are arranged, a time axis is determined that is different from the time axis of the AV clip. This is the time axis of the playlist, shown at level 1. Thus, it is possible to determine a playback path that is different from the AV clip by determining information about the playitem.

В этом заключается описание BD-ROM 100.This is the description of the BD-ROM 100.

<Локальное запоминающее устройство 200><Local Storage 200>

Последующее описывает локальное запоминающее устройство 200, которое является носителем записи по настоящему изобретению. Фиг.14 показывает внутреннюю структуру локального запоминающего устройства 200. Как показано на фигуре, носитель записи по настоящему изобретению может быть создан усовершенствованием прикладного уровня.The following describes a local storage device 200, which is a recording medium of the present invention. Fig. 14 shows an internal structure of a local storage device 200. As shown in the figure, the recording medium of the present invention can be created by improving the application layer.

Уровень 4 по фигуре показывает локальное запоминающее устройство 200, а уровень 3 показывает дорожку на локальном запоминающем устройстве 200. Фигура изображает дорожку в растянутом в сторону виде, хотя дорожка фактически сформирована в спираль, навивающуюся от внутренней части по направлению к наружной части локального запоминающего устройства 200. Дорожка состоит из начальной области, области тома и конечной области. Область тома на фигуре содержит уровневую модель, составленную из физического уровня, уровня файловой системы и прикладного уровня. Уровень 1 на фигуре показывает формат прикладного уровня локального запоминающего устройства 200 посредством использования структуры каталогов.The level 4 of the figure shows the local storage device 200, and the level 3 shows the track on the local storage device 200. The figure depicts the track stretched to the side, although the track is actually formed in a spiral, winding from the inside towards the outside of the local storage device 200 A track consists of a start region, a volume region, and an end region. The volume region in the figure contains a layered model composed of a physical layer, a file system layer, and an application layer. Level 1 in the figure shows the application layer format of the local storage 200 by using a directory structure.

В структуре каталогов, показанной на фиг.13, есть подкаталог «организация #1» под корневым каталогом. К тому же есть подкаталог «disk#1» под каталогом «организация #1». Каталог «организация #1» назначен определенному поставщику программного обеспечения. Каталог «disk#1» назначен каждому BD-ROM, поставляемому от поставщика.In the directory structure shown in FIG. 13, there is a subdirectory “organization # 1” under the root directory. In addition, there is a subdirectory "disk # 1" under the directory "organization # 1". The organization # 1 directory is assigned to a specific software provider. A “disk # 1” directory is assigned to each BD-ROM supplied by the vendor.

При такой конструкции, в которой каталог, назначенный определенному поставщику, включает в себя каталоги, которые соответствуют BD-ROM, загруженные данные для каждого BD-ROM, хранятся отдельно. Подобно информации, сохраненной в BD-ROM, под подкаталогом «disk#1», хранится следующая информация: информация списка воспроизведения («00002.mpls»); информация о клипах («00003.clpi» и «00004.clpi») и AV-клипы («00003.m2ts» и «00004.m2ts»).With this design, in which the directory assigned to a particular vendor includes directories that correspond to the BD-ROM, the downloaded data for each BD-ROM is stored separately. Like the information stored in the BD-ROM, the following information is stored under the “disk # 1” subdirectory: playlist information (“00002.mpls”); information about the clips (“00003.clpi” and “00004.clpi”) and the AV clips (“00003.m2ts” and “00004.m2ts”).

Последующее описывает компоненты локального запоминающего устройства 200: информация списка воспроизведения, информация о клипах и AV-клипы.The following describes the components of local storage 200: playlist information, clip information, and AV clips.

<Структура 1 локального запоминающего устройства 200: AV-клип><Structure 1 of local storage device 200: AV clip>

AV-клипы (00003.m2ts и 00004.m2ts) в локальном запоминающем устройстве 200 составляют вспомогательные клипы. Частичный транспортный поток получается демультиплексированием вспомогательного клипа. Частичный транспортный поток, полученный демультиплексированием вспомогательного клипа, назван «вторичным TS» («Secondary TS»). Такой вторичный TS является составляющей приложения сверхуплотнения. Последующее описывает приложение сверхуплотнения.The AV clips (00003.m2ts and 00004.m2ts) in the local storage 200 constitute auxiliary clips. A partial transport stream is obtained by demultiplexing an auxiliary clip. The partial transport stream obtained by demultiplexing the auxiliary clip is called “Secondary TS”. Such a secondary TS is a component of the over-compaction application. The following describes the application of over-compaction.

(Приложение сверхуплотнения)(Superconsolidation Application)

Приложение сверхуплотнения является приложением, которое, например, выбирает два TS - первичный TS на BD-ROM и вторичный TS, который получен через сеть или тому подобное, и записан в локальное запоминающее устройство - и воспроизводит их одновременно, тем самым, предоставляя возможность объединений элементарных потоков между этими двумя TS.An over-compaction application is an application that, for example, selects two TSs — a primary TS on a BD-ROM and a secondary TS, which is received through a network or the like, and recorded to a local storage device — and plays them simultaneously, thereby enabling elementary associations flows between these two TS.

Фиг.15 показывает способ, которым первичный TS и вторичный TS, составляющие приложение сверхуплотнения, подаются в декодер в пределах устройства воспроизведения BD-ROM. На фигуре в числе внутренних структурных компонентов устройства воспроизведения BD-ROM по левую сторону показаны дисковод BD-ROM, локальное запоминающее устройство и сеть, тогда как по правую сторону показан декодер. Фильтр PID, который выполняет демультиплексирование потока, показан в центре. Первичный TS (видео 1, аудио 1 (английский язык), аудио 2 (испанский язык), PG 1 (субтитр на английском языке), IG 1 (меню на английском языке)) и вторичный TS (аудио 2 (японский язык), аудио 3 (корейский язык), PG 2 (субтитр на японском языке), PG 3 (субтитр на корейском языке), IG 2 (меню на японском языке), IG 3 (меню на корейском языке)) на фигуре являются транспортными потоками, поставляемыми с BD-ROM и локального запоминающего устройства соответственно. Поскольку только английский язык (аудио 1) и испанский язык (аудио 2) записаны на диске, например, дублированный на японском языке вариант не может быть выбран на диске. Однако посредством загрузки в локальное запоминающее устройство вторичного TS, который включает в себя дублированный на японском языке вариант (аудио 2), поставляемый поставщиком контента, дублированное на японском языке аудио (аудио 2), субтитр на японском языке (PG 2) и экран меню на японском языке (IG 2) могут быть отправлены в декодер. Посредством этого пользователь способен выбирать любое из дублированного на японском языке аудио (аудио 2), субтитра на японском языке (PG 2) и экрана меню на японском языке (IG 2) и воспроизводить его с видео (видео 1).FIG. 15 shows a method by which a primary TS and a secondary TS constituting a super-densification application are supplied to a decoder within a BD-ROM reproducing apparatus. In the figure, among the internal structural components of the BD-ROM reproducing apparatus, a BD-ROM drive, a local storage device and a network are shown on the left side, while a decoder is shown on the right side. A PID filter that performs stream demultiplexing is shown in the center. Primary TS (video 1, audio 1 (English), audio 2 (Spanish), PG 1 (subtitle in English), IG 1 (menu in English)) and secondary TS (audio 2 (Japanese), audio 3 (Korean), PG 2 (subtitle in Japanese), PG 3 (subtitle in Korean), IG 2 (menu in Japanese), IG 3 (menu in Korean) in the figure are the transport streams supplied with BD-ROM and local storage, respectively. Since only English (audio 1) and Spanish (audio 2) are recorded on the disc, for example, an option duplicated in Japanese cannot be selected on the disc. However, by downloading to the local storage a secondary TS that includes a Japanese-dubbed version (audio 2) provided by the content provider, Japanese-dubbed audio (audio 2), a Japanese subtitle (PG 2), and a menu screen on Japanese (IG 2) can be sent to the decoder. Through this, the user is able to select any of the dubbed in Japanese audio (audio 2), Japanese subtitle (PG 2) and the Japanese menu screen (IG 2) and play it from the video (video 1).

Приложение сверхуплотнения предоставляет пользователю возможность свободно делать выбор по аудио и субтитрам при условии, что выбор может делаться для вплоть до одного, касательно каждого типа элементарных потоков, которые хранятся в двух TS, которые должны воспроизводиться одновременно (другими словами, вплоть до одного видео, одного аудио, одного субтитра и одного меню, сохраненных в первичном и вторичном TS).The over-compaction application allows the user to freely make selections for audio and subtitles, provided that the choice can be made for up to one, regarding each type of elementary streams, which are stored in two TS, which must be played simultaneously (in other words, up to one video, one audio, one subtitle and one menu stored in the primary and secondary TS).

Любое устройство воспроизведения BD-ROM способно декодировать первичный TS, однако не может декодировать два TS одновременно. Соответственно, введение приложения сверхуплотнения без ограничения могло бы вызвать повышение в габаритах аппаратного обеспечения и/или серьезное дополнение программного обеспечения, каковое имеет следствием повышение себестоимости устройств воспроизведения BD-ROM. Поэтому, когда приходит на ум выполнение приложения сверхуплотнения, ключевым вопросом является, может ли приложение сверхуплотнения быть реализовано на ресурсах, способных к декодированию только первичного TS.Any BD-ROM playback device is capable of decoding a primary TS, but cannot decode two TSs at the same time. Accordingly, the introduction of an overcompression application without limitation could cause an increase in the dimensions of the hardware and / or a serious addition to the software, which results in an increase in the cost of BD-ROM playback devices. Therefore, when it comes to the execution of a supercompression application, the key question is whether the supercondensation application can be implemented on resources capable of decoding only the primary TS.

Ограничение предоставления возможности для воспроизведения вплоть до одного по каждому типу элементарных потоков может быть допущено в качестве «замещения» элементарных потоков первичного TS таковыми у вторичного TS. Посредством этого приложение сверхуплотнения может выполняться на ресурсах, допускающих декодирование только одиночного TS, избегая повышения себестоимостей декодеров. Согласно примеру по фигуре аудиопоток, поток субтитров (PG) и поток меню (IG) первичного TS замещаются таковыми из вторичного TS.The restriction of providing the ability to play up to one for each type of elementary streams may be allowed as a “replacement” of elementary streams of the primary TS with those of the secondary TS. By this means, the overcompression application can be executed on resources capable of decoding only a single TS, avoiding an increase in the cost of decoders. According to the example of the figure, the audio stream, the subtitle stream (PG) and the menu stream (IG) of the primary TS are replaced by those of the secondary TS.

Вторичный TS может вводиться не только со встроенного HDD, такого как вышеупомянутое локальное запоминающее устройство, но также из памяти временного хранения, памяти первичного запоминающего устройства и HDD через сеть или посредством потоковой передачи данных посредством сетевого программного обеспечения. Для удобства пояснения допустим, что вторичный TS подается со встроенного HDD, подобного показанному на фиг.1.The secondary TS can be entered not only from the built-in HDD, such as the aforementioned local storage device, but also from the temporary storage memory, the primary storage device memory and the HDD through the network or by streaming data through network software. For convenience of explanation, suppose that the secondary TS is supplied from the built-in HDD, similar to that shown in figure 1.

<Структура 2 локального запоминающего устройства 200: информация о клипах><Structure 2 of the local storage device 200: information about the clips>

Информация о клипах (00003.clpi, 00004.clpi) в локальном запоминающем устройстве имеет такую же структуру данных, как информация о клипах, записанная на BD-ROM. Здесь скорость записи TS (TS_Recording_Rate) информации о клипах в локальном запоминающем устройстве установлена, чтобы быть такой же, как битовая скорость для считывания AV-клипа с BD-ROM. То есть скорость записи TS (TS_Recording_Rate), записанная в информации о клипах вспомогательного клипа, является такой же, как скорость записи TS (TS_Recording_Rate), записанная в информации о клипах основного клипа. Если скорость записи TS (TS_Recording_Rate) основного клипа является отличной от скорости записи TS (TS_Recording_Rate) вспомогательного клипа, изменяется скорость передачи данных для передачи из каждого депакетизатора источника в буфер, согласно которой передается TS. Это терпит неудачу в установлении допущения, что приложение сверхуплотнения может расцениваться как один входной TS.The clip information (00003.clpi, 00004.clpi) in the local storage device has the same data structure as the clip information recorded on the BD-ROM. Here, the recording speed TS (TS_Recording_Rate) of the clip information in the local storage is set to be the same as the bit rate for reading the AV clip from the BD-ROM. That is, the recording speed TS (TS_Recording_Rate) recorded in the clip information of the sub clip is the same as the recording speed TS (TS_Recording_Rate) recorded in the clip information of the main clip. If the recording speed TS (TS_Recording_Rate) of the main clip is different from the recording speed TS (TS_Recording_Rate) of the auxiliary clip, the data rate for transmission from each source depacketizer to the buffer according to which the TS is transmitted is changed. This fails to establish the assumption that the overcompression application can be regarded as one input TS.

В дополнение, поскольку элементарные потоки, которые должны воспроизводиться, беспрепятственно выбираются из двух TS, все, депакетизатор источника и буфер в декодере, настраиваются на битовую скорость первичного TS, когда выбрано аудио первичного TS, и все, депакетизатор источника и буфер в декодере, настраиваются на битовую скорость вторичного TS, когда выбирается аудио вторичного TS. Это делает последовательности операций и проверку устройства воспроизведения громоздкими и сложными.In addition, since the elementary streams to be reproduced are freely selected from two TSs, everything, the source depacketizer and the buffer in the decoder, are tuned to the bit rate of the primary TS when the audio of the primary TS is selected, and everything, the source depacketizer and the buffer in the decoder are tuned to the bit rate of the secondary TS when the audio of the secondary TS is selected. This makes the sequence of operations and verification of the playback device cumbersome and complex.

<Структура 2 локального запоминающего устройства 200: информация списка воспроизведения><Structure 2 of local storage 200: playlist information>

Следующей описана информация списка воспроизведения в локальном запоминающем устройстве 200. Файл (00002.mpls), за которым закреплено расширение «mpls», является информацией, которая определяет группу, созданную связыванием двух типов путей воспроизведения, названных основным путем (MainPath) и вспомогательным путем (Subpath), в качестве списка воспроизведения (PL). Фиг.16 показывает структуру данных информации списка воспроизведения. Как показано на фигуре, информация списка воспроизведения включает в себя: информацию об основном пути (MainPath()), которая определяет основной путь; информацию метки списка воспроизведения (PlayListMark()), которая определяет раздел, и информацию о вспомогательном пути (Subpath()), которая определяет вспомогательный путь. Внутренние структуры информации списка воспроизведения и информации об элементах воспроизведения являются такими же, как таковые в BD-ROM, а потому их описания здесь опущены. Последующее описывает информацию о вспомогательном пути.The following describes the information of the playlist in the local storage 200. The file (00002.mpls), which is assigned the extension “mpls”, is information that defines the group created by linking the two types of playback paths, called the main path (MainPath) and the auxiliary path ( Subpath), as a playlist (PL). 16 shows a data structure of playlist information. As shown in the figure, the information of the playlist includes: information about the main path (MainPath ()), which defines the main path; information of the label playlist (PlayListMark ()), which defines the section, and information about the auxiliary path (Subpath ()), which defines the auxiliary path. The internal structures of the playlist information and information about the playitems are the same as those in the BD-ROM, and therefore their descriptions are omitted here. The following describes helper path information.

<Разъяснение 1 информации списка воспроизведения: информация о вспомогательном пути><Clarification 1 of playlist information: auxiliary path information>

Тогда как основной путь является путем воспроизведения, определенным для основного клипа, которым является основное видео, вспомогательный путь является путем воспроизведения, определенным для вспомогательного клипа, который синхронизируется с основным путем.Whereas the primary path is a playback path specific to the primary clip, which is the primary video, the secondary path is the playback path specific to the secondary clip, which is synchronized with the primary path.

Фиг.17 показывает раскрытие внутренней структуры информации о вспомогательном пути. Как указано стрелкой hc0 на фигуре, каждый вспомогательный путь включает в себя «SubPath_type» («тип вспомогательного пути»), указывающий тип вспомогательного клипа, и одну или более частей информации об элементе вспомогательного воспроизведения (...SubPlayItem ()...).17 shows a disclosure of the internal structure of the auxiliary path information. As indicated by the hc0 arrow in the figure, each sub path includes a “SubPath_type” (“sub path type”) indicating the type of the sub clip and one or more pieces of information about the sub playback element (... SubPlayItem () ...) .

Выносная линия hc1 на фигуре указывает раскрытие структуры информации об элементе вспомогательного воспроизведения. Как указано стрелкой hc1 на фигуре, информация об элементе вспомогательного воспроизведения включает в себя: «Clip_information_file_name» («имя файла информации о клипах»); «Clip_codec_identifier» («идентификатор кодека клипа»); «SP_connection_condition» («условие соединения SP»); «ref_to_STC_id[0]» («ссылка на STC_id[0]»); «SubPlayItem_In_time» («момент времени начала элемента вспомогательного воспроизведения»); «SubPlayItem_Out_time» («момент времени окончания элемента вспомогательного воспроизведения»); «sync_PlayItem_id» («id элемента воспроизведения синхронизации» и «sync_start_PTS_of_PlayItem» («начальный PTS синхронизации элемента воспроизведения»).The lead line hc1 in the figure indicates the disclosure of the information structure of the sub play item. As indicated by the arrow hc1 in the figure, information about the sub-play item includes: “Clip_information_file_name” (“name of the clip information file”); "Clip_codec_identifier" ("identifier of the codec of the clip"); “SP_connection_condition”; "Ref_to_STC_id [0]" ("reference to STC_id [0]"); “SubPlayItem_In_time” (“time point of the start of the sub play item”); "SubPlayItem_Out_time" ("time point of the end of the sub-play item"); “Sync_PlayItem_id” (“id of the sync play item” and “sync_start_PTS_of_PlayItem” (“initial PTS of the sync play item”).

«Clip_information_file_name» является информацией, которая уникально задает вспомогательный клип, соответствующий элементу вспомогательного воспроизведения, описанием имени файла информации о клипах.“Clip_information_file_name” is information that uniquely identifies an auxiliary clip corresponding to the auxiliary playback element by describing the name of the clip information file.

«Clip_codec_identifier» указывает систему кодирования AV-клипа."Clip_codec_identifier" indicates the coding system of the AV clip.

«SP_connection_condition» указывает состояние соединения между элементом вспомогательного воспроизведения (текущим элементом вспомогательного воспроизведения) и элементом вспомогательного воспроизведения (предыдущим элементом вспомогательного воспроизведения), непосредственно предшествующим элементу вспомогательного воспроизведения (текущему элементу вспомогательного воспроизведения)."SP_connection_condition" indicates the state of the connection between the sub play item (the current sub play item) and the sub play item (the previous sub play item) immediately preceding the sub play item (the current sub play item).

«ref_to_STC_id[0]» уникально указывает последовательность STC (STC_Sequence), на которую нацеливается элемент воспроизведения."Ref_to_STC_id [0]" uniquely indicates the STC sequence (STC_Sequence) that the playitem is targeting.

«SubPlayItem_In_time» является информацией, указывающей начальную точку элемента вспомогательного воспроизведения на временной оси воспроизведения вспомогательного клипа."SubPlayItem_In_time" is information indicating the starting point of the sub-play item on the time axis of the playback of the sub-clip.

«SubPlayItem_Out_time» является информацией, указывающей конечную точку элемента вспомогательного воспроизведения на временной оси воспроизведения вспомогательного клипа.“SubPlayItem_Out_time” is information indicating an end point of an auxiliary playback element on a time axis of playback of the auxiliary clip.

«sync_PlayItem_id» является информацией, уникально задающей из числа элементов воспроизведения, составляющих основной путь, элемент воспроизведения, с которым синхронизируется элемент вспомогательного воспроизведения. «SubPlayItem_In_time» представлено на временной оси воспроизведения элемента воспроизведения, заданного с помощью id элемента воспроизведения синхронизации (sync_PlayItem_id)."Sync_PlayItem_id" is information that uniquely specifies from among the playitems constituting the main path, the playitem with which the auxiliary playitem is synchronized. “SubPlayItem_In_time” is represented on the time axis of the playback of the playitem specified by the id of the synchronization playitem (sync_PlayItem_id).

«sync_start_PTS_of_PlayItem» указывает с временной точностью в 45 кГц, где на временной оси воспроизведения элемента воспроизведения, заданного с помощью id элемента воспроизведения синхронизации (sync_PlayItem_id), присутствует начальная точка элемента вспомогательного воспроизведения, заданного моментом времени начала элемента вспомогательного воспроизведения (SubPlayItem_In_time)."Sync_start_PTS_of_PlayItem" indicates with a temporal accuracy of 45 kHz, where on the playback time axis of the playitem specified by the id of the synchronization playitem (sync_PlayItem_id), there is a starting point of the sub play item specified by the start time of the sub play item (SubPlayItem_In_time).

<Детализация информации 2 о вспомогательном пути. Взаимосвязь трех объектов><Detailing information 2 about the auxiliary path. The relationship of the three objects>

Здесь три объекта означают вспомогательные клипы в локальном запоминающем устройстве 200, информацию списка воспроизведения в локальном запоминающем устройстве 200 и основной клип на BD-ROM.Here, three objects mean auxiliary clips in the local storage 200, information of the playlist in the local storage 200 and the main clip on the BD-ROM.

Фиг.18 показывает взаимосвязь вспомогательных клипов в локальном запоминающем устройстве 200, информации списка воспроизведения в локальном запоминающем устройстве 200 и основного клипа на BD-ROM. Уровень 1 по фигуре указывает вспомогательные клипы, присутствующие в локальном запоминающем устройстве 200. Как показано на уровне 1, есть разные типы вторичного TS во вспомогательных клипах локального запоминающего устройства 200: аудиопоток, поток PG и поток IG. Любой один из них используется в качестве вспомогательного пути для синхронизации воспроизведения.Fig. 18 shows the relationship of auxiliary clips in local storage 200, playlist information in local storage 200 and main clip on a BD-ROM. The level 1 of the figure indicates auxiliary clips present in the local storage 200. As shown in level 1, there are different types of secondary TS in the auxiliary clips of the local storage 200: audio stream, PG stream, and IG stream. Any one of them is used as an auxiliary path for synchronizing playback.

Уровень 2 указывает две временные оси, определенные информацией списка воспроизведения. Нижняя временная ось на уровне 2 является временной осью списка воспроизведения, определенной информацией об элементе воспроизведения, а верхняя временная ось является временной осью элемента вспомогательного воспроизведения, определенного элементом вспомогательного воспроизведения.Level 2 indicates two time axes defined by playlist information. The lower time axis at level 2 is the time axis of the playlist defined by the playitem information, and the upper time axis is the time axis of the sub playitem defined by the sub playitem.

Как показано на фигуре, можно видеть, что имя файла информации о клипах элемента вспомогательного воспроизведения (SubPlayItem_Clip_information_file_name) информации об элементе вспомогательного воспроизведения играет роль выбора из числа файлов.m2ts, хранящих вспомогательные клипы, файла.m2ts в качестве целевого объекта для секции воспроизведения.As shown in the figure, it can be seen that the name of the file of information about the clips of the auxiliary playback element (SubPlayItem_Clip_information_file_name) information about the element of auxiliary playback plays the role of selecting from the number of files.m2ts storing auxiliary clips, file.m2ts as the target for the playback section.

Момент времени окончания элемента вспомогательного воспроизведения (SubPlayItem.Out_time) играет роль при определении начальной точки и конечной точки секции воспроизведения.The end time of the sub play item (SubPlayItem.Out_time) plays a role in determining the start point and end point of the play section.

Указатель Id элемента воспроизведения синхронизации (Sync_PlayItem_Id) играет роль при задании, какой элемент воспроизведения синхронизируется с элементом вспомогательного воспроизведения. Начальный PTS синхронизации элемента воспроизведения (sync_start_PTS_of_PlayItem) играет роль при определении момента времени по моменту времени начала элемента вспомогательного воспроизведения (SubPlayItem_In_time) на временной оси списка воспроизведения.The pointer Id of the synchronization playitem (Sync_PlayItem_Id) plays a role in setting which playitem is synchronized with the sub playitem. The initial PTS of the synchronization of the playitem (sync_start_PTS_of_PlayItem) plays a role in determining the time from the start time of the auxiliary playitem (SubPlayItem_In_time) on the time axis of the playlist.

В этом заключается описание информации о вспомогательном пути.This is a description of the auxiliary path information.

<Таблица STN (STN_table)><STN table (STN_table)>

Признаком информации списка воспроизведения в локальном запоминающем устройстве 200 является таблица STN (STN_Table). Последующее описывает информацию списка воспроизведения в локальном запоминающем устройстве 200.A sign of the playlist information in the local storage 200 is the table STN (STN_Table). The following describes the playlist information in the local storage 200.

Таблица STN (STN_table) является таблицей, показывающей по меньшей мере одну комбинацию элементарных потоков, которым предоставлена возможность воспроизводиться одновременно. Комбинация элементарных потоков была выбрана из многочисленных элементарных потоков, мультиплексированных в основной клип, заданный именем файла информации о клипах (Clip_Information_file_name) информации об элементе воспроизведения, а также элементарных потоков, мультиплексированных во вспомогательный клип, заданный именем файла информации о клипах (Clip_Information_file_name) информации об элементе вспомогательного воспроизведения. Такие многочисленные элементарные потоки, разрешенные для одновременного воспроизведения в таблице STN (STN_table) в информации списка воспроизведения, формируют так называемый «системный поток».The STN table (STN_table) is a table showing at least one combination of elementary streams that are allowed to play simultaneously. The combination of elementary streams was selected from numerous elementary streams multiplexed into the main clip given by the name of the clip information file (Clip_Information_file_name) information about the playitem, as well as elementary streams multiplexed into the auxiliary clip given by the name of the clip information file (Clip_Information_file_name) information about sub play item. Such numerous elementary streams allowed for simultaneous playback in the STN table (STN_table) in the playlist information form the so-called "system stream".

Точнее говоря, таблица STN (STN_table) формируется ассоциативным связыванием входа потока (Stream_entry) каждого из многочисленных элементарных потоков, мультиплексированных в основной клип, и таковых, мультиплексированных во вспомогательный клип, с помощью атрибута потока (Stream_attribute).More precisely, the STN table (STN_table) is formed by associating the stream input (Stream_entry) of each of the many elementary streams multiplexed into the main clip and those multiplexed into the auxiliary clip using the stream attribute (Stream_attribute).

Фиг.19A показывает внутреннюю структуру таблицы STN (STN_table). Как показано на фигуре, таблица STN (STN_table) включает в себя многочисленные пары входа и атрибута (вход-атрибут) и имеет структуру данных, показывающую итоговую сумму этих пар вход-атрибут (количество входов видеопотока (number_of_video_stream_entries), количество входов аудиопотока (number_of_audio_stream_entries), количество входов потока PG (number_of_PG_stream_entries), количество входов потока IG (number_of_IG_stream_entries)).Figa shows the internal structure of the table STN (STN_table). As shown in the figure, the STN table (STN_table) includes numerous input and attribute pairs (input-attribute) and has a data structure showing the total amount of these input-attribute pairs (number of video stream inputs (number_of_video_stream_entries), number of audio stream inputs (number_of_audio_stream_entries) , the number of inputs of the PG stream (number_of_PG_stream_entries), the number of inputs of the IG stream (number_of_IG_stream_entries)).

Пары вход-атрибут соответствуют каждому из видеопотоков, аудиопотоков, потоков PG и потоков IG, которые могут воспроизводиться в элементе воспроизведения, как показано символом «{» на фигуре.The input-attribute pairs correspond to each of the video streams, audio streams, PG streams and IG streams that can be played in the playitem, as shown by the symbol "{" in the figure.

Последующее описывает детализацию входа-атрибута.The following describes the detail of the input attribute.

Фиг.19B показывает атрибут потока (Stream_attribute), соответствующий видеопотоку.FIG. 19B shows a stream attribute (Stream_attribute) corresponding to a video stream.

Атрибут потока (Stream_attribute) видеопотока включает в себя «Video_format» («формат видео»), указывающий формат отображения видеопотока, и «frame_rate» («частоту кадров»), указывающую частоту для отображения видеопотока.The stream attribute (Stream_attribute) of the video stream includes “Video_format” (“video format”) indicating the display format of the video stream, and “frame_rate” (“frame rate”) indicating the frequency for displaying the video stream.

Фиг.19C показывает атрибут потока (Stream_attribute), соответствующий аудиопотоку.Fig. 19C shows a stream attribute (Stream_attribute) corresponding to an audio stream.

Атрибут потока (Stream_attribute) аудиопотока состит из: «stream_coding_type» («тип кодирования потока»), указывающий способ кодирования аудиопотока; «audio_presentation_type» («тип представления аудио»), указывающий структуру канала соответствующего аудиопотока; «Sampling_frequency» («частоту дискретизации»), указывающую частоту дискретизации соответствующего аудиопотока, и «audio_language code» («код языка аудио»), указывающий атрибут языка аудиопотока.The stream attribute (Stream_attribute) of an audio stream is composed of: “stream_coding_type” (“stream encoding type”) indicating a method for encoding an audio stream; “Audio_presentation_type” (“audio presentation type”) indicating a channel structure of a corresponding audio stream; “Sampling_frequency”, indicating the sampling rate of the corresponding audio stream, and “audio_language code”, indicating the attribute of the audio stream language.

Фиг.19D показывает вход потока (Stream_entry) аудиопотока. Как показано на фигуре, вход потока (Stream_entry) видеопотока включает в себя «ref_to_Stream_PID_of_Main_Clip» («ссылку на PID потока основного клипа»), указывающую PID, используемый для демультиплексирования видеопотока.Fig. 19D shows an input of a stream (Stream_entry) of an audio stream. As shown in the figure, the input of the stream (Stream_entry) of the video stream includes “ref_to_Stream_PID_of_Main_Clip” (“reference to the PID of the main clip stream”) indicating the PID used to demultiplex the video stream.

Атрибут потока (Stream_attribute) аудиопотока, потока IG и потока PG, мультиплексированных в основной клип, имеет формат, показанный на фиг.19D.The stream attribute (Stream_attribute) of the audio stream, IG stream, and PG stream multiplexed into the main clip has the format shown in FIG. 19D.

<Ограничение на объем данных элементарных потоков, разрешенных для воспроизведения><Restriction on the amount of data of elementary streams allowed for playback>

Таблица STN (STN_table) показывает в числе элементарных потоков, считываемых с BD-ROM и локального запоминающего устройства, разрешенные для воспроизведения. Однако, если таблица STN (STN_table) предоставляет элементарным потокам возможность воспроизводиться без ограничения, система декодера может быть выведена из строя.The STN table (STN_table) shows, among the elementary streams read from the BD-ROM and the local storage, allowed for playback. However, if the STN table (STN_table) provides elementary streams with the ability to play without limitation, the decoder system may be disabled.

Причина этого состоит в следующем. Согласно стандарту системы декодера MPEG2, перекрытие между пакетами TS на временной оси ATC в одном транспортном потоке не допускается. Это является основным принципом для того, чтобы заставить систему декодера выполнять надлежащую последовательность операций декодирования. С другой стороны, в случае где предоставлена возможность обоих, воспроизведения потока, считываемого с BD-ROM, и воспроизведения потока, считываемого из локального запоминающего устройства, и к тому же воспроизведение AV-клипа, считываемого с BD-ROM и воспроизведение AV-клипа, считываемого из локального запоминающего устройства, выполняются одновременно, создается перекрытие между пакетом TS из BD-ROM и пакетом TS из локального запоминающего устройства.The reason for this is as follows. According to the MPEG2 decoder system standard, overlap between TS packets on the ATC time axis in the same transport stream is not allowed. This is a basic principle in order to make the decoder system perform the proper decoding process. On the other hand, in the case where it is possible for both, to play a stream read from a BD-ROM and to play a stream read from a local storage device, and furthermore, play an AV clip read from a BD-ROM and play an AV clip, read from the local storage device are performed simultaneously, an overlap is created between the TS packet from the BD-ROM and the TS packet from the local storage device.

При условии этого фактора, следующее ограничение накладывается на элементарные потоки декодирования.Under the condition of this factor, the following restriction is imposed on elementary decoding streams.

Элементарными потоками декодирования являются видеопоток, аудиопоток, поток PG и поток IG, которые были разрешены, в таблице STN (STN_table), для воспроизведения и были выбраны для одновременного воспроизведения. Некоторые элементарные потоки декодирования считываются из локального запоминающего устройства, другие считываются с BD-ROM.The elementary decoding streams are a video stream, an audio stream, a PG stream, and an IG stream that were enabled in the STN table (STN_table) for playback and were selected for simultaneous playback. Some elementary decoding streams are read from the local storage device, others are read from the BD-ROM.

Ограничение, наложенное на элементарные потоки декодирования, состоит в том, что количеством битов пакетов TS (пакетов TS декодирования), составляющих AV-клип (основной клип, вспомогательный клип), который включает в себя элементарные потоки, разрешенные, в таблице STN (STN_table), для одновременного воспроизведения, но не включает в себя элементарные потоки, не разрешенные для воспроизведения, должно быть 48 Мбит/с или менее.The limitation imposed on elementary decoding streams is that the number of bits of TS packets (TS decoding packets) constituting an AV clip (main clip, auxiliary clip), which includes the elementary streams allowed, in the STN table (STN_table) , for simultaneous playback, but does not include elementary streams not allowed for playback, should be 48 Mbit / s or less.

Единица времени в одну секунду названа «Window» («окном») и может быть расположена в любой точке на временной оси последовательности ATC. То есть количеством битов элементарных потоков декодирования в течение одной секунды в любой момент должно быть 48 Мбит или менее.The one second time unit is called “Window” and can be located anywhere on the time axis of the ATC sequence. That is, the number of bits of the elementary decoding streams for one second at any time should be 48 Mbit or less.

Фиг.20 показывает пакеты TS, считываемые с BD-ROM и из локального запоминающего устройства, и иллюстрирует из этих пакетов TS те, которые должны подаваться в декодер. Уровень 1 фигуры показывает многочисленные пакеты TS, считываемые с BD-ROM; уровень 3 показывает многочисленные пакеты TS, считываемые из локального запоминающего устройства. Из числа пакетов TS на уровнях 1 и 3 заштрихованными на фигуре являются пакеты TS, составляющие элементарный поток декодирования (пакеты TS декодирования). Уровень 2 на фигуре показывает из пакетов TS декодирования, показанных на уровнях 1 и 3, возникающие за период в одну секунду. Как было описано выше, согласно стандарту системы декодера MPEG2 перекрытие не допускается между пакетами TS на временной оси ATC в одном транспортном потоке. Однако по фигуре может быть видно, что перекрытия rp1, rp2 и rp3 между пакетами TS возникают на временной оси ATC. Таким образом, перекрытия в операциях над пакетами TS разрешены в пределах единичного времени окна. Однако накладывается другое требование, которое не применяется к стандарту системы декодера MPEG2. То есть вышеупомянутое ограничение 48 Мбит/окно или менее. Уровень 4 представляет математические выражения условия, которым должны удовлетворять пакеты TS декодирования. Математические выражения указывают, что значение, полученное преобразованием итоговой суммы вышеупомянутых пакетов TS декодирования в итоговую сумму битов (итоговая сумма пакетов TS декодирования умножается на количество байтов пакета TS, 188, а результат выражается в 8 битах), составляет 48 Мбит или менее.FIG. 20 shows TS packets read from the BD-ROM and from the local storage device, and illustrates from these TS packets those to be supplied to the decoder. Level 1 of the figure shows multiple TS packets read from the BD-ROM; level 3 shows multiple TS packets read from a local storage device. Of the TS packets at levels 1 and 3, the shaded ones in the figure are TS packets constituting an elementary decoding stream (TS decoding packets). Layer 2 in the figure shows from the TS decoding packets shown in layers 1 and 3 occurring over a period of one second. As described above, according to the MPEG2 decoder system standard, overlap is not allowed between TS packets on the ATC time axis in the same transport stream. However, it can be seen from the figure that overlaps rp1, rp2 and rp3 between the TS packets occur on the time axis of the ATC. Thus, overlaps in operations on TS packets are allowed within a unit window time. However, another requirement is imposed that does not apply to the MPEG2 decoder system standard. That is, the above limitation is 48 Mbps or less. Level 4 represents mathematical expressions of the conditions that TS decoding packets must satisfy. Mathematical expressions indicate that the value obtained by converting the total amount of the aforementioned TS decoding packets to the total amount of bits (the total sum of TS decoding packets is multiplied by the number of bytes of the TS packet, 188, and the result is expressed in 8 bits) is 48 Mbit or less.

Наложение вышеупомянутого условия на пакеты TS декодирования за любой период в одну секунду является ограничением количества битов согласно настоящему варианту осуществления. Когда авторская разработка выполняется для приложения сверхуплотнения, проверяется, является ли количеством битов пакета TS декодирования в течение периода в одну секунду 48 Мбит или менее, наряду с соблюдением сдвига окна по последовательности исходных пакетов каждый раз на один пакет. Когда ограничение удовлетворено, окно сдвигается на следующий пакет TS. Если ограничение не удовлетворено, определяется, что есть нарушение стандарта BD-ROM. Когда момент времени окончания (Out_Time) окна достигает последнего исходного пакета после повторения таких сдвигов, определяется, что исходные пакеты соответствуют стандарту BD-ROM.The imposition of the aforementioned condition on decoding TS packets for any period of one second is a limitation of the number of bits according to the present embodiment. When the authoring is performed for a supercompression application, it is checked whether the number of bits of the TS decoding packet is 48 Mbps or less for a period of one second, while observing a window shift in the sequence of source packets each time by one packet. When the constraint is satisfied, the window shifts to the next TS packet. If the restriction is not satisfied, it is determined that there is a violation of the BD-ROM standard. When the window's End Time (Out_Time) reaches the last source packet after repeating such shifts, it is determined that the source packets are BD-ROM compliant.

<Сдвиг окна><Window shift>

ATS, имеющий временную точность в 27 МГц, прикреплен к каждому пакету TS. Координаты на временной оси ATC имеют временную точность в 1/27000000 секунды; однако ATS не всегда присутствует в каждой координате на временной оси ATC. На временной оси ATC периоды, не содержащие ATS, и периоды, содержащие ATS, появляются нерегулярным образом. Появление ATS варьируется, а потому, когда сдвигается окно, каким образом регулировать момент времени окончания (Out_Time) окна, становится проблемой в случае, где ATS отсутствует 1 секунду после момента времени начала (In_Time).An ATS having a temporal accuracy of 27 MHz is attached to each TS packet. The coordinates on the ATC time axis have a time accuracy of 1/27000000 seconds; however, ATS is not always present at every coordinate on the time axis of the ATC. On the ATC time axis, periods not containing ATS and periods containing ATS appear irregularly. The appearance of ATS varies, and therefore, when the window shifts, how to adjust the window's end time (Out_Time), it becomes a problem in the case where ATS is absent 1 second after the start time (In_Time).

Момент времени окончания (Out_Time) окна, в принципе, установлен, чтобы быть 1 секундой после момента времени начала (In_Time). Здесь, если ATS присутствует на временной оси ATC в координате, соответствующей 1 секунде после момента времени начала (In_Time), координата в In_Time + 1 секунду устанавливается в качестве момента времени окончания (Out_Time). Если ATS отсутствует в координате, соответствующей 1 секунде после момента времени начала (In_Time), координата, в которой появляется ATS на временной оси ATC для первого момента времени после In_Time + 1 секунду, устанавливается в качестве момента времени окончания (Out_Time). Поскольку момент времени окончания (Out_Time) сдвига окна регулируется с учетом периодов времени, в течение которых не присутствует никаких ATS, разные битовые значения рассчитываются каждый раз, когда сдвигается окно. Момент времени начала (IN_Time) сдвигается каждый раз на один пакет TS, а момент времени окончания (Out_Time) настраивается в соответствии со сдвигом, и в силу этого модуляция битовых значений на временной оси ATC может рассчитываться с точностью.The end time (Out_Time) of the window is, in principle, set to be 1 second after the start time (In_Time). Here, if the ATS is present on the ATC time axis in a coordinate corresponding to 1 second after the start time (In_Time), the coordinate in In_Time + 1 second is set as the end time (Out_Time). If there is no ATS at the coordinate corresponding to 1 second after the start time (In_Time), the coordinate at which ATS appears on the ATC time axis for the first time after In_Time + 1 second is set as the end time (Out_Time). Since the window shift end time (Out_Time) is adjusted to take into account time periods during which no ATS is present, different bit values are calculated each time the window is shifted. The start time (IN_Time) is shifted each time by one TS packet, and the end time (Out_Time) is adjusted according to the shift, and therefore, the modulation of bit values on the ATC time axis can be calculated with accuracy.

Фиг.21A-21D показывают сдвиги окна. На каждой из фигур с 21A по 21D верхняя часть показывает последовательность исходного пакета, который является целевым объектом для проверки, а нижняя часть показывает момент времени начала (In_Time) и момент времени окончания (Out_Time) окна. На фиг.21A момент времени начала (In_Time) окна задает исходный пакет #i. Пакет #j TS, соответствующий 1 секунде после момента времени начала (In_Time) окна, установлен в качестве момента времени окончания (Out_Time) окна.21A-21D show window shifts. In each of the figures 21A through 21D, the upper part shows the sequence of the source packet, which is the target for verification, and the lower part shows the start time (In_Time) and the end time (Out_Time) of the window. In FIG. 21A, the window start time (In_Time) defines the source packet #i. Package #j TS corresponding to 1 second after the start time (In_Time) of the window is set as the end time (Out_Time) of the window.

На фиг.21B момент времени начала (In_Time) окна задает исходный пакет #i+1. С другой стороны, не присутствует никакого ATS в координате, соответствующей исходному пакету #j+l, которой является 1 секунда после момента времени начала (In_Time) окна. Момент времени окончания (Out_Time) окна по фиг.21B должен задавать один пакет TS вне пакета #j TS; однако, поскольку исходный пакет не присутствует сразу же после пакета #j TS, битовая скорость окна по фиг.21B становится меньшей, чем битовая скорость окна по фиг.21A. В таком случае нет точки для окна по фиг.21B с выполнением проверки. При условии этого фактора посредством настройки момента времени окончания (Out_Time) окна пакет #j+2 TS, который появляется в первый раз после 1 секунды от момента времени начала (In_Time) окна, устанавливается в качестве момента времени окончания (Out_Time). Настройка момента времени окончания (Out_Time) таким способом делает проверку окна по фиг.21B надлежащей для выполнения.In FIG. 21B, the window start time (In_Time) defines the source packet # i + 1. On the other hand, there is no ATS in the coordinate corresponding to the original packet # j + l, which is 1 second after the window's start time (In_Time). The end time (Out_Time) of the window of FIG. 21B should specify one TS packet outside TS packet #j; however, since the source packet is not present immediately after the TS packet #j, the bit rate of the window of FIG. 21B becomes lower than the bit rate of the window of FIG. 21A. In this case, there is no point for the window of FIG. 21B with verification. Under the condition of this factor, by setting the window end time (Out_Time), the packet # j + 2 TS, which appears for the first time after 1 second from the window start time (In_Time), is set as the end time point (Out_Time). Setting the end time (Out_Time) in this way makes the window check of FIG. 21B appropriate for execution.

На фиг.21C момент времени начала (In_Time) окна задает исходный пакет #i+2. С другой стороны, пакет #j+2 TS расположен на позиции, соответствующей 1 секунде после момента времени начала (In_Time) окна. Итоговая сумма пакетов TS для окна по фиг.21C является такой же, как таковая для окна по фиг.21B, а потому нет точки для выполнения проверки. Соответственно, никакая проверка не выполняется на фиг.21C, а момент времени начала (In_Time) окна сдвигается.In FIG. 21C, the window start time (In_Time) sets the source packet # i + 2. On the other hand, the packet # j + 2 TS is located at the position corresponding to 1 second after the start time (In_Time) of the window. The total amount of TS packets for the window of FIG. 21C is the same as that of the window of FIG. 21B, and therefore there is no point to perform the check. Accordingly, no verification is performed in FIG. 21C, and the window start time (In_Time) is shifted.

На фиг.21D момент времени начала (In_Time) окна задает исходный пакет #i+3. С другой стороны, никакого исходного пакета не присутствует в позиции, соответствующей для исходного пакета #j+3, который находится в 1 секунде после момента времени начала (In_Time) окна. При условии этого фактора регулированием момента времени окончания (Out_Time) окна описанным выше образом пакет #j+4 TS, который появляется в первый раз после 1 секунды от момента времени начала (In_Time) окна, устанавливается в качестве момента времени окончания (Out_Time). Посредством этого итоговая сумма пакетов TS в окне становится отличной от таковой для окна по фиг.21B, а проверка окна по фиг.21D делается надлежащей для выполнения.In FIG. 21D, the window start time (In_Time) defines the source packet # i + 3. On the other hand, no source package is present at the position corresponding to source package # j + 3, which is 1 second after the window's start time (In_Time). Under the condition of this factor, by controlling the window end time (Out_Time) in the manner described above, the packet # j + 4 TS, which appears for the first time after 1 second from the window start time (In_Time), is set as the end time point (Out_Time). By this, the total amount of TS packets in the window becomes different from that for the window of FIG. 21B, and the window check of FIG. 21D is made suitable for execution.

Выполнением проверки количества битов со сдвигом окна вышеописанным образом, когда выполняется авторская разработка, гарантируется, что никакого отрицательного переполнения или переполнения не вызывается, когда пакеты TS считываются из локального запоминающего устройства и BD-ROM и подаются в декодер.By checking the number of bits with a window shift in the manner described above when authoring is performed, it is ensured that no negative overflow or overflow is caused when TS packets are read from the local storage and the BD-ROM and supplied to the decoder.

Обеспечение сдвига окна описано ниже со ссылкой на отдельные примеры по фиг.22-26.Providing window shift is described below with reference to the individual examples of FIGS. 22-26.

Уровень 1 на фиг.22 является графиком, показывающим временную модуляцию касательно объема данных пакетов TS, считываемых с BD-ROM, а также объема данных пакетов TS, считываемых из локального запоминающего устройства. Горизонтальной осью является время, а вертикальной осью являются объемы передачи относительно каждой точки на временной оси. На графике количества битов в момент времени, когда пакеты TS считываются с BD-ROM и локального запоминающего устройства, испытывают модуляцию, как указано пунктирными кривыми.Level 1 in FIG. 22 is a graph showing temporal modulation regarding the amount of data of the TS packets read from the BD-ROM, as well as the data volume of the TS packets read from the local storage device. The horizontal axis is time, and the vertical axis is the transmission volumes relative to each point on the time axis. On the graph of the number of bits at the point in time when the TS packets are read from the BD-ROM and the local storage device, modulation is tested as indicated by dashed curves.

Уровень 2 на фиг.22 показывает суммарный объем данных из числа пакетов TS, считываемых с BD-ROM и локального запоминающего устройства, пакетов TS, которые должны подаваться в декодер. Временная модуляция суммарного объема передачи является такой, как показано сплошной линией. Суммарный объем данных является суммарным объемом пакетов, принадлежащих потокам, которые были разрешены в таблице STN (STN_table). В наихудшем случае суммарный объем передачи мог бы подойти вплотную к 95 Мбитам, а пакеты TS, содержащие этот объем данных, могли бы подаваться в декодер. Здесь временные оси графика поделены на семь окон и производится сравнение между количеством подачи в каждом окне и передаваемым объемом для каждого окна.Level 2 in FIG. 22 shows the total amount of data from the number of TS packets read from the BD-ROM and the local storage, TS packets to be supplied to the decoder. Temporal modulation of the total transmission volume is as shown by the solid line. The total amount of data is the total amount of packets belonging to the streams that were allowed in the STN table (STN_table). In the worst case, the total amount of transmission could come close to 95 Mbit, and TS packets containing this amount of data could be fed to the decoder. Here, the time axis of the graph is divided into seven windows and a comparison is made between the amount of feed in each window and the transmitted volume for each window.

Уровень 3 на фиг.22 является графиком уровня, являющегося поделенным до каждой 1 секунды. Фиг.23A и 23B показывают сравнение между передаваемым объемом и объемом, подаваемым в декодер в течение каждого окна. Передаваемый объем для окна составляет 48 Мбит за секунду и составляет 96 Мбит, если объем преобразован в биты за 0,5 секунд. Шаблон pn1 штриховки на фигуре указывает объем данных, подаваемый в декодер. Шаблон pn2 штриховки на фигуре указывает передаваемый объем в каждом окне. В любом окне участок с шаблоном pn1 штриховки имеет такую же или меньшую площадь, чем участок с шаблоном pn2 штриховки. Это указывает, что объем данных, поставляемый из BD-ROM и локального запоминающего устройства, ограничен передаваемым объемом или меньшим в любом окне.Level 3 in FIG. 22 is a graph of a level divided up to every 1 second. 23A and 23B show a comparison between the transmitted volume and the volume supplied to the decoder during each window. The transmitted volume for the window is 48 Mbit per second and is 96 Mbit if the volume is converted to bits in 0.5 seconds. The hatch pattern pn1 in the figure indicates the amount of data supplied to the decoder. The hatch pattern pn2 in the figure indicates the transferred volume in each window. In any window, the area with the hatch pattern pn1 has the same or less area than the area with the hatch pattern pn2. This indicates that the amount of data supplied from the BD-ROM and the local storage device is limited to the transferred amount or less in any window.

В любой точке на временной оси ATC передаваемым объемом в декодер является 48 Мбит/с или меньше. Поэтому, даже если передаваемый объем в декодер локально подходит вплотную к 96 Мбит, передача при 96 Мбитах никогда не продолжается в течение 0,5 секунды, что подтверждается расчетом 48 Mбит=96 бит × 0,5 секунды. Соответственно, если декодер выполняет операцию предварительного чтения, чтобы заранее считывать исходные пакеты из BD-ROM и локального запоминающего устройства до того, как достигнут пик, никакое отрицательное переполнение или переполнение не вызывается в буфере декодера.At any point on the ATC time axis, the transmitted volume to the decoder is 48 Mbps or less. Therefore, even if the transmitted volume to the decoder locally fits close to 96 Mbit, transmission at 96 Mbit never lasts for 0.5 second, which is confirmed by the calculation of 48 Mbit = 96 bit × 0.5 second. Accordingly, if the decoder performs a preliminary read operation to pre-read the source packets from the BD-ROM and the local storage device before the peak is reached, no negative overflow or overflow is caused in the decoder buffer.

Передаваемый объем в каждом окне, то есть 48 Мбит/с, был определен с использованием в качестве руководства объема, который декодер, действующий в соответствии с MPEG, может заранее считывать в буфер. Если объем данных, который может заранее считываться в буфер, является большим, может делаться большим объем данных в секунду или может устанавливаться большим период для окна. Таким образом, настоящее изобретение не ограничено скоростью в 48 Мбит/с.The transmitted volume in each window, i.e. 48 Mbit / s, was determined using as a guide the volume that the MPEG-based decoder can read into the buffer in advance. If the amount of data that can be read into the buffer in advance is large, the volume of data per second can be made large or the period for the window can be set large. Thus, the present invention is not limited to a speed of 48 Mbps.

В этом заключается описание ограничения объема данных на вторичный TS, которому в таблице STN (STN_table) предоставлена возможность воспроизводиться.This is a description of the limitation of the amount of data on the secondary TS, which in the STN table (STN_table) is given the opportunity to play.

<Настройка информации об условии соединения (connection_condition) и информации об условии соединения SP (sp_connection_condition)><Configuring connection condition information (connection_condition) and connection condition information SP (sp_connection_condition)>

Последующее описывает настройки информации об условии соединения (connection_condition) в элементе воспроизведения и информации об условии соединения SP (sp_connection_condition information) в элементе вспомогательного воспроизведения для реализации приложения сверхуплотнения. Поля информации об условии соединения (connection_condition) и информации об условии соединения SP (sp_connection_condition information) могут принимать значения «1», «5» и «6», смыслы которых являются следующими.The following describes the settings for the connection condition information (connection_condition) in the playitem and the connection condition information SP (sp_connection_condition information) in the auxiliary playitem for implementing the overcompression application. Fields of information about the connection condition (connection_condition) and information about the condition of the connection SP (sp_connection_condition information) can take the values "1", "5" and "6", the meanings of which are as follows.

connection_condition=1 (CC=1): Нет никакой гарантии для безразрывного соединения между элементом воспроизведения (текущим элементом воспроизведения) и непосредственно предшествующим элементом воспроизведения (предыдущим элементом воспроизведения). То есть это режим соединения, который предоставляет возможность происходить стоп-кадру, а воспроизведение прерывается (разрывное соединение).connection_condition = 1 (CC = 1): There is no guarantee for a seamless connection between the playitem (current playitem) and the immediately preceding playitem (previous playitem). That is, this is a connection mode, which provides an opportunity to occur in a freeze frame, and playback is interrupted (disconnected connection).

connection_condition=5 (CC=5): Есть гарантия для безразрывного соединения между видеопотоком, потоком PG и потоком IG, мультиплексированными в основной клип текущего элемента воспроизведения, и видеопотоком, потоком PG и потоком IG, мультиплексированным в основной клип предыдущего элемента воспроизведения. С другой стороны, это неверно при аудиопотоке, мультиплексированном в основной клип.connection_condition = 5 (CC = 5): There is a guarantee for a seamless connection between the video stream, the PG stream and the IG stream multiplexed into the main clip of the current playitem and the video stream, PG stream and the IG stream multiplexed into the main clip of the previous playitem. On the other hand, this is not true with an audio stream multiplexed into the main clip.

connection_condition=6 (CC=6): Соответственные потоки TS, принадлежащие текущему элементу воспроизведения и предыдущему элементу воспроизведения, логически продолжаются (они являются непрерывными на временной оси, и способы кодирования также являются одинаковыми), и есть гарантия для безразрывного соединения как аудио-, так и видеопотоков.connection_condition = 6 (CC = 6): The corresponding TS streams belonging to the current playitem and the previous playitem are logically continued (they are continuous on the time axis, and the encoding methods are the same), and there is a guarantee for a seamless connection as audio, and video streams.

Информация об условии соединения SP (sp_connection_condition), записанная в элементе вспомогательного воспроизведения, может быть определена, как изложено ниже.The connection condition information SP (sp_connection_condition) recorded in the sub play element can be determined as follows.

Информация об условии соединения SP (sp_connection_condition) (SP_CC=1): Нет никакой гарантии для безразрывного соединения между элементом вспомогательного воспроизведения (текущим элементом вспомогательного воспроизведения) и непосредственно предшествующим элементом вспомогательного воспроизведения (предыдущим элементом вспомогательного воспроизведения).Connection condition information SP (sp_connection_condition) (SP_CC = 1): There is no guarantee for a seamless connection between the sub playback element (the current sub playback element) and the immediately preceding sub playback element (the previous sub playback element).

Информация об условии соединения SP (sp_connection_condition) (SP_CC=5): Есть гарантия для безразрывного соединения между потоком PG и потоком IG, мультиплексированными во вспомогательный клип текущего элемента вспомогательного воспроизведения, а также потоком PG и потоком IG, мультиплексированными во вспомогательный клип предыдущего элемента вспомогательного воспроизведения. С другой стороны, это не имеет места с аудиопотоком, мультиплексированным во вспомогательный клип.Connection condition information SP (sp_connection_condition) (SP_CC = 5): There is a guarantee for a seamless connection between the PG stream and the IG stream multiplexed into the auxiliary clip of the current auxiliary playback element, as well as the PG stream and IG stream multiplexed into the auxiliary clip of the previous auxiliary element reproduction. On the other hand, this is not the case with an audio stream multiplexed into an auxiliary clip.

Информация об условии соединения SP (sp_connection_condition) (SP_CC=6): Соответственные потоки TS, принадлежащие текущему элементу вспомогательного воспроизведения и предыдущему элементу вспомогательного воспроизведения, логически непрерывны (они являются непрерывными на временной оси, и способы кодирования также являются одинаковыми), и есть гарантия для безразрывного соединения как аудио-, так и видеопотоков.Connection condition information SP (sp_connection_condition) (SP_CC = 6): Corresponding TS streams belonging to the current sub playback element and the previous sub playback element are logically continuous (they are continuous on the time axis and the encoding methods are also the same), and there is a guarantee for seamless connection of both audio and video streams.

Элемент вспомогательного воспроизведения, который должен быть установлен для элемента воспроизведения, который реализует приложение сверхуплотнения, не будет вызывать несоответствие, даже если видеопоток, аудиопоток, поток PG или поток IG элемента вспомогательного воспроизведения находятся в пределах элемента воспроизведения. Поэтому они имеют идентичные условия соединения. То есть, если элемент #1 воспроизведения и элемент #2 воспроизведения соединены согласно CC=1, элемент #1 вспомогательного воспроизведения и элемент #2 вспомогательного воспроизведения, им соответствующие, также соединены согласно CC=1. Подобным образом, если элемент #1 воспроизведения и элемент #2 воспроизведения соединены согласно CC=5, соответствующие элемент #1 вспомогательного воспроизведения и элемент #2 вспомогательного воспроизведения соединены при удовлетворении условия CC=5.The sub-play item that must be set for the play item that implements the overcompression application will not cause a mismatch even if the video stream, audio stream, PG stream or IG stream of the sub play element is within the play item. Therefore, they have identical connection conditions. That is, if the playitem # 1 and the playitem # 2 are connected according to CC = 1, the auxiliary playitem # 1 and the auxiliary playitem # 2 corresponding thereto are also connected according to CC = 1. Similarly, if the playitem # 1 and the playitem # 2 are connected according to CC = 5, the corresponding auxiliary playitem # 1 and the auxiliary playitem # 2 are connected when the condition CC = 5 is satisfied.

Последующее описывает взаимосвязь моментов времени начала (In_Time) и моментов времени окончания (Out_Time) элементов воспроизведения и элементов вспомогательного воспроизведения, составляющих приложение сверхуплотнения, а также детализацию информации об условии соединения (connection_condition), со ссылкой на фиг.24, 25 и 26.The following describes the relationship of the start times (In_Time) and the end times (Out_Time) of the playitems and sub-playitems constituting the overcompression application, as well as the details of the connection condition information (connection_condition), with reference to FIGS. 24, 25 and 26.

<Взаимосвязь моментов времени начала (In_Time) и моментов времени окончания (Out_Time)><The relationship of the start time (In_Time) and the end time (Out_Time)>

Фиг.24 показывает состояние соединения элементов воспроизведения и элементов вспомогательного воспроизведения, составляющих сверхуплотнение. Уровень 1 по фигуре является временной осью вспомогательного клипа; а уровни 2 и 3 являются временной осью элемента вспомогательного воспроизведения и временной осью списка воспроизведения соответственно. Уровень 4 является временной осью основного клипа. На фигуре, в случае, где информацией об условии соединения (connection_condition) элемента воспроизведения является «=5», информацией об условии соединения (connection_condition) элемента вспомогательного воспроизведения также является SP_CC=5.Fig. 24 shows a connection state of reproducing elements and sub-reproducing elements constituting over-compaction. The figure 1 level is the time axis of the sub clip; and levels 2 and 3 are the time axis of the sub play item and the time axis of the play list, respectively. Level 4 is the time axis of the main clip. In the figure, in the case where the connection condition information (connection_condition) of the playitem is “= 5”, the connection condition information (connection_condition) of the sub playitem is also SP_CC = 5.

Фиг.25 показывает взаимосвязь между моментами времени начала (In_Time) и моментами времени окончания (Out_Time) элементов воспроизведения и моментами времени начала (In_Time) и моментами времени окончания (Out_Time) элементов вспомогательного воспроизведения в случае, где информация об условии соединения (connection_condition) элемента воспроизведения и информация об условии соединения SP (sp_connection_condition) элемента вспомогательного воспроизведения, показанные на фиг.24, установлены в «=5». Уровни 1 и 4 являются такими же, как таковые на фиг.24. Из двух элементов воспроизведения (информация #1 об элементе воспроизведения и информация #2 об элементе воспроизведения), показанных на фиг.24, информация #1 об элементе воспроизведения содержит момент времени начала (In_Time), указывающий момент t1 времени, и момент времени окончания (Out_Time), указывающий момент t2 времени. Момент времени начала, соответствующий информации #2 об элементе воспроизведения, указывает момент t3 времени, а момент времени окончания (Out_Time), соответствующий информации #2 элемента воспроизведения, указывает момент t4 времени.Fig. 25 shows the relationship between the start time points (In_Time) and the end time points (Out_Time) of the playitems and the start time points (In_Time) and the end time (Out_Time) of the auxiliary playitems in the case where the connection condition information (connection_condition) of the item the playback and connection condition information SP (sp_connection_condition) of the sub playback item shown in FIG. 24 are set to “= 5”. Levels 1 and 4 are the same as those in FIG. Of the two playitems (playitem information # 1 and playitem information # 2) shown in FIG. 24, playitem information # 1 contains a start time (In_Time) indicating a time t1 and an end time ( Out_Time) indicating the time t2. The start time corresponding to the information # 2 about the playitem indicates the time t3, and the end time (Out_Time) corresponding to the information # 2 of the playitem indicates the time t4.

Когда состоянием соединения элемента воспроизведения является CC=5, начальный PTS синхронизации элемента воспроизведения (Sync_Start_Pts_of_PlayItem) элемента вспомогательного воспроизведения указывает такой же момент времени, как момент времени начала (In_Time) элемента воспроизведения. Момент времени начала (In_Time) и момент времени окончания (Out_Time) элемента вспомогательного воспроизведения показывают такие же моменты времени, как момент времени начала (In_Time) и момент времени окончания (Out_Time) элемента воспроизведения. Таким образом, в случае где информацией об условии соединения (connection_condition) элемента воспроизведения является «=5», информация об условии соединения SP (sp_connection_condition) элемента вспомогательного воспроизведения также установлена в «=5», а момент времени начала (In_Time) и момент времени окончания (Out_time) указывают такие же моменты времени, как момент времени начала (In_Time) и момент времени окончания (Out_Time) элемента вспомогательного воспроизведения.When the connection state of the playitem is CC = 5, the initial PTS of the synchronization of the playitem (Sync_Start_Pts_of_PlayItem) of the sub playitem indicates the same time point as the start time (In_Time) of the playitem. The start time (In_Time) and the end time (Out_Time) of the sub play item show the same time points as the start time (In_Time) and the end time (Out_Time) of the play item. Thus, in the case where the connection condition information (connection_condition) of the playitem is “= 5”, the connection condition information SP (sp_connection_condition) of the auxiliary playitem is also set to “= 5”, and the start time (In_Time) and the time point endings (Out_time) indicate the same time points as the starting time point (In_Time) and the ending time point (Out_Time) of the sub play element.

Момент времени начала (In_Time) и момент времени окончания (Out_Time) элемента воспроизведения и момент времени начала (In_Time) и момент времени окончания (Out_Time) элемента вспомогательного воспроизведения соответственно ссылаются на PTS блока представления видео и блока представления аудио. Момент времени начала (In_Time) и момент времени окончания (Out_Time) элемента воспроизведения и момент времени начала (In_Time) и момент времени окончания (Out_Time) элемента вспомогательного воспроизведения, согласующиеся друг с другом, означают, что значения PTS блока представления видео и блока представления аудио, указываемые ссылкой моментом времени начала (In_Time) и моментом времени окончания (Out_Time) элемента воспроизведения, являются такими же, как значения PTS блока представления видео и блока представления аудио, указываемые ссылкой моментом времени начала (In_Time) и моментом времени окончания (Out_Time) элемента вспомогательного воспроизведения. В этом случае необходимо, чтобы первичный TS и вторичный TS были закодированы так, что имеют одинаковую продолжительность времени, и чтобы мотивировали PTS блока представления видео и блока представления аудио быть одинаковыми, когда выполняется авторская разработка. Создание первичного TS и вторичного TS таким способом также является условием для реализации CC=5 и SP_CC=5.The start time (In_Time) and the end time (Out_Time) of the playitem and the start time (In_Time) and the end time (Out_Time) of the sub playitem refer to the PTS of the video presentation block and the audio presentation block, respectively. The start time (In_Time) and the end time (Out_Time) of the playitem and the start time (In_Time) and the end time (Out_Time) of the sub playitem consistent with each other mean that the PTS values of the video presentation block and the audio presentation block indicated by the reference point in time (In_Time) and the point in time (Out_Time) of the playitem are the same as the PTS values of the video presentation unit and the audio presentation block indicated by the reference time point the start (In_Time) and the end time (Out_Time) of the sub play item. In this case, it is necessary that the primary TS and secondary TS are encoded so that they have the same length of time, and that the PTS of the video presentation unit and the audio presentation unit are motivated to be the same when the authoring is performed. Creating a primary TS and a secondary TS in this way is also a condition for implementing CC = 5 and SP_CC = 5.

<Значения STC, которые должны указываться ссылкой для синхронного воспроизведения><STC values to be referenced for synchronous playback>

Фиг.26 показывает значение STC, которое должно указываться ссылкой, когда воспроизводится часть, существующая от момента времени начала (In_Time) до момента времени окончания (Out_Time) элемента воспроизведения, и значение STC, которое должно указываться ссылкой, когда воспроизводится часть, существующая от момента времени начала (In_Time) до момента времени окончания (Out_Time) элемента вспомогательного воспроизведения. Уровни 2 и 3 являются такими же, как на предыдущей фигуре. Уровень 1 показывает в графическом виде значение STC, которое должно указываться ссылкой, когда воспроизводится часть, существующая от момента времени начала (In_Time) до момента времени окончания (Out_Time) элемента вспомогательного воспроизведения. Уровень 4 показывает в графическом виде значение STC, которое должно указываться ссылкой, когда воспроизводится часть, существующая от момента времени начала (In_Time) до момента времени окончания (Out_Time) элемента воспроизведения. Горизонтальная ось уровня 1 является временной осью, а вертикальная ось показывает значения STC относительно каждого момента времени на временной оси. Значения STC уровня 1 заключают в себе монотонное возрастание zk1 от момента времени начала (In_Time) до момента времени окончания (Out_Time) информации #1 элемента вспомогательного воспроизведения и монотонное возрастание zk2 от момента времени начала (In_Time) до момента времени окончания (Out_Time) информации #2 элемента вспомогательного воспроизведения. Значения STC уровня 4 заключают в себе монотонное возрастание zk3 от момента времени начала (In_Time) до момента времени окончания (Out_Time) информации #1 элемента воспроизведения и монотонное возрастание zk4 от момента времени начала (In_Time) до момента времени окончания (Out_Time) информации #2 элемента воспроизведения.FIG. 26 shows an STC value to be referenced when a part existing from a start time (In_Time) to an end time (Out_Time) of a playitem is reproduced, and an STC value to be referenced when a part existing from a moment is played. start time (In_Time) to the end time (Out_Time) of the sub play item. Levels 2 and 3 are the same as in the previous figure. Level 1 shows in graphical form the value of the STC, which should be indicated by reference when playing back the part that exists from the start time (In_Time) to the end time (Out_Time) of the sub play element. Level 4 shows in graphical form the value of the STC, which should be indicated by reference when playing back the part that exists from the start time (In_Time) to the end time (Out_Time) of the playitem. The horizontal axis of level 1 is the time axis, and the vertical axis shows the STC values relative to each point in time on the time axis. Level 1 STC values include a monotonic increase in zk1 from the start time point (In_Time) to the end time (Out_Time) of the auxiliary playback element information # 1 and a monotonic increase in zk2 from the start time point (In_Time) to the end time (Out_Time) of information # 2 elements of auxiliary playback. Level 4 STC values include a monotonic increase in zk3 from the start time point (In_Time) to the end time (Out_Time) of the playitem item # 1 and a monotonic increase in zk4 from the start time point (In_Time) to the end time (Out_Time) of the information # 2 play item.

Так как момент времени начала (In_Time) элемента воспроизведения указывает один и тот же момент времени с моментом времени начала (In_Time) элемента вспомогательного воспроизведения, начальные значения STC на вышеприведенном графике одинаковы, и значение STC в промежуточные моменты времени также является одинаковым. То есть STC2(i), которое является значением STC, которое должно указываться ссылкой, когда исходный пакет, расположенный в представленный на усмотрение момент i времени между моментом времени начала (In_Time) и моментом времени окончания (Out_Time) элемента воспроизведения, подается в декодер, является таким же, как STC1(i), которое является значением STC, которое должно указываться ссылкой, когда исходный пакет, расположенный в том же самом моменте i времени между моментом времени начала (In_Time) и моментом времени окончания (Out_Time) элемента вспомогательного воспроизведения, подается в декодер. Когда значения STC одинаковы, все счетчики STC в устройстве должны сохраняться в таком состоянии, чтобы создавать одинаковые значения синхронизирующего сигнала и подавать их в блоки демультиплексирования, таким образом, упрощая элементы управления в устройстве воспроизведения.Since the start time (In_Time) of the playitem indicates the same point in time with the start time (In_Time) of the sub playitem, the initial STC values in the above graph are the same, and the STC value at the intermediate time points is also the same. That is, STC2 (i), which is the STC value, which should be indicated by reference, when the source packet located at the discretionary time moment i between the start time (In_Time) and the end time (Out_Time) of the playitem is supplied to the decoder, is the same as STC1 (i), which is the STC value to be referenced when the source packet located at the same time i between the start time (In_Time) and the end time (Out_Time) of the auxiliary element The performance is fed to the decoder. When the STC values are the same, all STC counters in the device must be kept in such a state that they create the same values of the clock signal and feed them to the demultiplexing units, thereby simplifying the controls in the playback device.

Предположительно говоря, в случае где два или более элементов вспомогательного воспроизведения подготовлены для одного элемента воспроизведения в противоположность элементам управления, проиллюстрированным на фиг.25 и 26, видео и аудио прерываются на границе этих элементов вспомогательного воспроизведения, и неудобства - такие как приостановка воспроизведения в середине элемента воспроизведения - будут происходить в результате. Дополнительно, когда последовательность операций замещения первичного TS реализуется в приложении сверхуплотнения, временная ось STC должна изменяться при замещении, каковое ведет к усложнению синхронных элементов управления в устройстве воспроизведения.Presumably speaking, in the case where two or more sub-play items are prepared for one play item as opposed to the controls illustrated in FIGS. 25 and 26, video and audio are interrupted at the border of these sub-play items, and inconveniences such as pausing playback in the middle playback element - will occur as a result. Additionally, when the primary TS substitution process is implemented in an over-compaction application, the time axis of the STC must change during substitution, which leads to more complex synchronous controls in the reproducing apparatus.

С другой стороны, посредством определения обоих, момента времени начала (In_Time) и момента времени окончания (Out_Time) элемента воспроизведения или элемента вспомогательного воспроизведения на непрерывной временной оси STC, возможно предотвратить вышеупомянутые неудобства, то есть прерывание видео и аудио, а также замещение транспортных потоков. Вследствие этих ситуаций по отношению к одному элементу воспроизведения назначается один элемент вспомогательного воспроизведения, обладающий такими же моментами начала и окончания, как таковые у элемента воспроизведения.On the other hand, by determining both the start time (In_Time) and the end time (Out_Time) of the playitem or auxiliary playitem on the continuous time axis of the STC, it is possible to prevent the aforementioned inconveniences, i.e. interruption of video and audio, as well as the replacement of transport streams . Due to these situations, with respect to one playitem, one auxiliary playitem is assigned having the same start and end times as those of the playitem.

<Погрешности моментов времени начала (In_Time) и моментов времени окончания (Out_Time)><Inaccuracies of the start time (In_Time) and the end time (Out_Time)>

Здесь точное совпадение между моментом времени начала (In_Time) и моментом времени окончания (Out_Time) элемента воспроизведения и таковыми у элемента вспомогательного воспроизведения не требуется, и может быть допустим некоторый уровень погрешностей. Следующими описаны погрешности момента времени начала (In_Time) и момента времени окончания (Out_Time).Here, an exact match between the start time point (In_Time) and the end time point (Out_Time) of the playitem and those of the auxiliary playitem is not required, and some level of errors may be acceptable. The following describes the errors of the start time (In_Time) and the end time (Out_Time).

Моменты времени STC момента времени начала (In_Time) и момента времени окончания (Out_Time) элемента воспроизведения устанавливаются для видеокадов элемента воспроизведения. С другой стороны, временные характеристики момента времени начала (In_Time) и момента времени окончания (Out_Time) элемента вспомогательного воспроизведения устанавливаются для аудиокадров элемента вспомогательного воспроизведения. Это происходит потому, что элемент вспомогательного воспроизведения, главным образом, используется для режиссерских пояснений, а потому, является частым случай что видеопоток не мультиплексируется в него. В этом случае вследствие, в смысле точности, разницы в длительности периода воспроизведения соответственных блоков представления моменты времени их начала и окончания не совпадают друг с другом. Соответственно, необходимо предоставить возможность погрешности, по меньшей мере, в менее чем один кадр. Моменты времени начала и окончания элемента #n воспроизведения и элемента #n вспомогательного воспроизведения также заданы на одной и той же временной оси STC, как изложено ниже:The STC time instants of the start time (In_Time) and the end time (Out_Time) of the playitem are set for the video frames of the playitem. On the other hand, the time characteristics of the start time point (In_Time) and the end time point (Out_Time) of the sub play element are set for the audio frames of the sub play element. This is because the auxiliary playback element is mainly used for director's explanations, and therefore, it is a frequent case that the video stream is not multiplexed into it. In this case, due to, in the sense of accuracy, the differences in the duration of the reproduction period of the respective presentation blocks, the time moments of their start and end do not coincide with each other. Accordingly, it is necessary to provide the possibility of an error of at least one frame. The start and end times of the playitem #n and the auxiliary playitem #n are also set on the same time axis STC, as follows:

|(PlayItem#n.Out - PlayItem#n.In) - (SubPlayItem#n.Out_time -SubPlayItem#n.In_time)| ≤ периода воспроизведения в 1 прогрессивный кадр или два чересстрочных поля видео, имеющего кратчайший период воспроизведения в элементе #n воспроизведения ≤1/60 секунды. Для значения по левую сторону может использоваться период воспроизведения в 1 прогрессивный кадр или два чересстрочных поля видео, имеющего самый продолжительный период воспроизведения в элементе #n воспроизведения (≤1/25), или значение может быть установлено, чтобы быть 1 секундой или менее.| (PlayItem # n.Out - PlayItem # n.In) - (SubPlayItem # n.Out_time -SubPlayItem # n.In_time) | ≤ a playback period of 1 progressive frame or two interlaced fields of a video having the shortest playback period in the playback element #n ≤1 / 60 seconds. For the value on the left side, a playback period of 1 progressive frame or two interlaced fields of a video having the longest playback period in the playback element #n (≤1 / 25) can be used, or the value can be set to be 1 second or less.

В этом заключается описание взаимосвязи моментов времени начала (In_Iime) и моментов времени окончания (Out_Time) элемента воспроизведения и элемента вспомогательного воспроизведения.This is a description of the relationship between the start times (In_Iime) and the end times (Out_Time) of the playitem and sub playitem.

Последующее подробно описывает информацию об условии соединения (connection_condition) и информацию об условии соединения SP (sp_connection_condition). Для того чтобы отвечать требованиям CC=5 и SP_CC=5, следующие условия должны быть удовлетворены на всех уровнях AV-потока, транспортного потока, блока представления видео и блока представления аудио, и элементарного потока.The following describes in detail the connection condition information (connection_condition) and the connection condition information SP (sp_connection_condition). In order to meet the requirements of CC = 5 and SP_CC = 5, the following conditions must be satisfied at all levels of the AV stream, transport stream, video presentation unit and audio presentation unit, and elementary stream.

<Уровень AV-потока><AV stream level>

Информация об условии соединения (connection_condition) текущего элемента воспроизведения и информация об условии соединения (sp_connection_condition), являющиеся установленными в «5», означают, что есть «чистый перерыв» между конечной точкой AV-потока, воспроизводимого в предыдущем элементе воспроизведения, и начальной точкой AV-потока, воспроизводимого в текущем элементе воспроизведения.The connection condition information (connection_condition) of the current playitem and the connection condition information (sp_connection_condition) set to “5” mean that there is a “clean break” between the end point of the AV stream played in the previous playitem and the start point The AV stream being played in the current playitem.

Для того чтобы реализовать чистый перерыв, AV-поток, воспроизводимый в предыдущем элементе воспроизведения, и AV-поток, воспроизводимый в текущем элементе воспроизведения, должны удовлетворять следующим требованиям.In order to realize a clean break, the AV stream played in the previous playitem and the AV stream played in the current playitem must satisfy the following requirements.

(1) Необязательный блок доступа отсутствует в точке окончания основного клипа, заданного в предыдущем элементе воспроизведения, а необязательный блок доступа, содержащий PTS, был исключен из периода, следующего за моментом времени окончания (Out_Time) предыдущего элемента воспроизведения.(1) An optional access unit is missing at the end point of the main clip specified in the previous playitem, and the optional access unit containing PTS has been excluded from the period following the Out_Time of the previous playitem.

Подобным образом, необязательный блок доступа отсутствует в точке окончания вспомогательного клипа, заданного в предыдущем элементе вспомогательного воспроизведения, а необязательный блок доступа, содержащий PTS, был исключен из периода, следующего за моментом времени окончания (Out_Time) предыдущего элемента вспомогательного воспроизведения.Similarly, the optional access unit is missing at the end point of the sub clip specified in the previous sub-item, and the optional access unit containing PTS has been excluded from the period following the end time (Out_Time) of the previous sub-item.

(2) В начале AV-потока, заданного в текущем элементе воспроизведения, необязательный блок доступа, содержащий PTS, был исключен из периода, предшествующего моменту времени начала (In_Time) текущего элемента воспроизведения. В дополнение, первый блок представления аудио основного клипа включает в себя выборку, которая должна воспроизводиться в момент времени начала (In_Time) на временной оси STC.(2) At the beginning of the AV stream specified in the current playitem, an optional access unit containing PTS was excluded from the period preceding the start time (In_Time) of the current playitem. In addition, the first audio presentation block of the main clip includes a sample to be played at the start time (In_Time) on the time axis of the STC.

Подобным образом, в начале AV-потока, заданного в текущем элементе вспомогательного воспроизведения, необязательный блок доступа, содержащий PTS, был исключен из периода, предшествующего моменту времени начала (In_Time) текущего элемента вспомогательного воспроизведения. В дополнение, первый блок представления аудио вспомогательного клипа включает в себя выборку, которая должна воспроизводиться в момент времени начала (In_Time) на временной оси STC.Similarly, at the beginning of the AV stream specified in the current sub-play item, an optional access unit containing PTS was excluded from the period preceding the start time (In_Time) of the current sub-play item. In addition, the first sub-audio clip presentation unit includes a sample to be reproduced at the start time (In_Time) on the time axis of the STC.

(3) Исходные пакеты, составляющие основной клип, заданный в предыдущем элементе воспроизведения, должны мультиплексироваться некоторым образом, чтобы все из них принимались в систему декодера до того, как первый пакет основного клипа, заданного в текущем элементе воспроизведения, отправляется в декодер.(3) The source packets constituting the main clip specified in the previous playitem must be multiplexed in some way so that all of them are received in the decoder system before the first packet of the main clip specified in the current playitem is sent to the decoder.

Подобным образом, данные вспомогательного клипа, заданного в предыдущем элементе вспомогательного воспроизведения, должны мультиплексироваться некоторым образом, чтобы все из них принимались в систему декодера до того, как первый пакет вспомогательного клипа, заданного в текущем элементе вспомогательного воспроизведения, отправляется в декодер.Similarly, the data of the auxiliary clip specified in the previous auxiliary playback element must be multiplexed in some way so that all of them are received in the decoder system before the first packet of the auxiliary clip specified in the current auxiliary playback element is sent to the decoder.

В этом заключается описание условий, которые должны удовлетворяться на уровне AV-потока. Далее, описаны условия, которые должны удовлетворяться на уровне транспортных потоков.This is a description of the conditions that must be satisfied at the level of the AV stream. The following describes conditions that must be satisfied at the level of traffic flows.

<Уровень транспортных потоков><Traffic Flow Level>

Здесь два первичных TS, которые являются целевыми объектами безразрывного соединения, когда CC=5, названы первичным TS1 и первичным TS2. Два первичных TS, которые являются целевыми объектами безразрывного соединения, когда SP_CC=5, названы вторичным TS1 и вторичным TS2.Here, two primary TSs, which are the targets of a seamless connection when CC = 5, are called primary TS1 and primary TS2. The two primary TSs that are the targets of the continuous connection when SP_CC = 5 are called secondary TS1 and secondary TS2.

Фиг.27 показывает, каким образом TS1 и TS2 идентифицируются в AV-клипе, указанном ссылкой в предыдущем элементе воспроизведения и предыдущем элементе вспомогательного воспроизведения, и AV-клипе, указанном ссылкой в текущем элементе воспроизведения и текущем элементе вспомогательного воспроизведения. Уровень 4 на фигуре показывает первичный TS1 и первичный TS2; а уровень 3 показывает основной клип 1 предыдущего элемента воспроизведения и основной клип 2 текущего элемента воспроизведения. Уровень 1 показывает вторичный TS1 и вторичный TS2; а уровень 2 показывает вспомогательный клип 1 предыдущего элемента вспомогательного воспроизведения и вспомогательный клип 2 текущего элемента вспомогательного воспроизведения.Fig. 27 shows how TS1 and TS2 are identified in an AV clip indicated by a link in a previous playitem and a previous sub playitem and an AV clip indicated by a link in the current playitem and the current auxiliary playitem. Level 4 in the figure shows primary TS1 and primary TS2; and level 3 shows the main clip 1 of the previous playitem and the main clip 2 of the current playitem. Level 1 shows the secondary TS1 and secondary TS2; and level 2 shows the sub clip 1 of the previous sub play item and the sub clip 2 of the current sub play item.

Первичный TS1 состоит из порции данных, которые заштрихованы в основном клипе 1 на фигуре. Порция данных в основном клипе 1 начинается с исходного пакета, с которого может начинаться декодирование момента времени начала (In_Time) в предыдущем элементе воспроизведения. Этот исходный пакет расположен в начале блока представления видео и блока представления аудио, которые указываются ссылкой моментом времени начала (In_Time). Затем порция данных заканчивается последним пакетом основного клипа 1.Primary TS1 consists of a chunk of data that is hatched in the main clip 1 in the figure. The data portion in the main clip 1 begins with the source packet, from which the decoding of the start time (In_Time) in the previous playitem can begin. This source package is located at the beginning of the video presentation unit and the audio presentation unit, which are indicated by reference at the start time point (In_Time). Then the data portion ends with the last packet of the main clip 1.

Первичный TS2 состоит из порции данных, которые заштрихованы в основном клипе 2 на фигуре. Эта порция данных в основном клипе 2 начинается с первого исходного пакета основного клипа 2. В таком случае порция данных в основном клипе 2 заканчивается исходным пакетом, на котором завершается декодирование текущего элемента воспроизведения. Этот исходный пакет является исходным пакетом, расположенным в конце блока представления видео и блока представления аудио, которые указываются ссылкой моментом времени окончания (Out_Time) текущего элемента воспроизведения.Primary TS2 consists of a chunk of data that is hatched in the main clip 2 in the figure. This piece of data in the main clip 2 begins with the first source packet of the main clip 2. In this case, the piece of data in the main clip 2 ends with the original packet, at which the decoding of the current playitem ends. This source package is a source package located at the end of the video presentation unit and the audio presentation unit, which are indicated by the reference point in time (Out_Time) of the current playitem.

Вторичный TS1 состоит из порции данных, которые заштрихованы во вспомогательном клипе 1 на фигуре. Порция данных во вспомогательном клипе 1 начинается с исходного пакета, с которого может начинаться декодирование момента времени начала (In_Time) в предыдущем элементе вспомогательного воспроизведения. Этот исходный пакет расположен в начале блока представления видео и блока представления аудио, которые указываются ссылкой моментом времени начала (In_Time). Затем порция данных заканчивается последним пакетом вспомогательного клипа 1.Secondary TS1 consists of a piece of data that is hatched in the auxiliary clip 1 in the figure. The data portion in the auxiliary clip 1 begins with the source packet, from which the decoding of the start time (In_Time) in the previous auxiliary playback element can begin. This source package is located at the beginning of the video presentation unit and the audio presentation unit, which are indicated by reference at the start time point (In_Time). Then, the data portion ends with the last packet of the auxiliary clip 1.

Вторичный TS2 состоит из порции данных, которые заштрихованы во вспомогательном клипе 2 на фигуре. Эта порция данных во вспомогательном клипе 2 начинается с первого исходного пакета вспомогательного клипа 2. В таком случае порция данных во вспомогательном клипе 2 заканчивается исходным пакетом, на котором завершается декодирование текущего элемента воспроизведения. Этот исходный пакет является исходным пакетом, расположенным в конце блока представления видео и блока представления аудио, которые указываются ссылкой моментом времени окончания (Out_Time) текущего элемента вспомогательного воспроизведения.Secondary TS2 consists of a chunk of data that is shaded in sub clip 2 in the figure. This data portion in the auxiliary clip 2 begins with the first source packet of the auxiliary clip 2. In this case, the data portion in the auxiliary clip 2 ends with the original packet, at which the decoding of the current playitem ends. This source package is the source package located at the end of the video presentation unit and the audio presentation unit, which are indicated by the reference point in time (Out_Time) of the current sub-play element.

Согласно описанию, приведенному выше, может быть понятно, каким образом компонуются транспортные потоки, которые должны быть соединены в основном клипе и вспомогательном клипе, когда CC=5 и SP_CC=5. Основной клип предыдущего элемента воспроизведения должен заканчиваться блоком представления видео и блоком представления аудио, которые указываются ссылкой моментом времени окончания (Out_Time) предыдущего элемента воспроизведения, а основной клип текущего элемента воспроизведения должен начинаться с блока представления видео и блока представления аудио, которые указываются ссылкой моментом времени начала (In_Time) текущего элемента воспроизведения. Эта взаимосвязь также справедлива для предыдущего элемента вспомогательного воспроизведения. То есть вспомогательный клип предыдущего элемента вспомогательного воспроизведения должен заканчиваться блоком представления аудио, который указывается ссылкой моментом времени окончания (Out_Time) предыдущего элемента вспомогательного воспроизведения, а вспомогательный клип текущего элемента вспомогательного воспроизведения должен начинаться с блока представления аудио, который указывается ссылкой моментом времени начала (In_Time) текущего элемента вспомогательного воспроизведения. Это происходит потому, что необязательный блок представления аудио не должен присутствовать при или после блока представления видео и блока представления аудио, которые указываются ссылкой моментом времени окончания (Out_Time) предыдущего элемента вспомогательного воспроизведения, как описано выше. С другой стороны, вспомогательный клип предыдущего элемента вспомогательного воспроизведения не должен начинаться с блока представления аудио, который указывается ссылкой моментом времени начала (In_Time) предыдущего элемента вспомогательного воспроизведения, а вспомогательный клип текущего элемента вспомогательного воспроизведения также не должен заканчиваться блоком представления аудио, который указывается ссылкой моментом времени окончания (Out_Time) текущего элемента вспомогательного воспроизведения.According to the description above, it can be understood how transport streams are arranged, which should be connected in the main clip and the auxiliary clip when CC = 5 and SP_CC = 5. The main clip of the previous playitem should end with the video presentation unit and the audio presentation unit, which are indicated by the reference time point (Out_Time) of the previous playitem, and the main clip of the current playitem should start with the video presentation unit and the audio presentation unit, which are indicated by the point in time start (In_Time) of the current playitem. This relationship is also valid for the previous subplay item. That is, the auxiliary clip of the previous auxiliary playback element must end with an audio presentation unit, which is indicated by the reference time point of the end (Out_Time) of the previous auxiliary playback element, and the auxiliary clip of the current auxiliary playback element must start with the audio presentation unit, which is indicated by the reference time of the start time (In_Time ) of the current sub play item. This is because the optional audio presentation unit does not have to be present at or after the video presentation unit and the audio presentation unit, which are indicated by the reference point in time (Out_Time) of the previous auxiliary playback element, as described above. On the other hand, the auxiliary clip of the previous auxiliary playback element should not start with the audio presentation block, which is indicated by the reference point in time (In_Time) of the previous auxiliary playback element, and the auxiliary clip of the current auxiliary playback element should also not end with the audio presentation block, which is indicated by the link the end time (Out_Time) of the current sub-play item.

Согласно фиг.24 и 27 первичный TS и вторичный TS должны быть созданы имеющими одинаковую продолжительность времени, а значения PTS блока представления видео и блока представления аудио должны быть созданы обладающими одним и тем же значением. В дополнение, основной клип предыдущего элемента воспроизведения и вспомогательный клип предыдущего элемента воспроизведения должны мультиплексироваться таким образом, чтобы заканчиваться блоком представления видео и блоком представления аудио, соответствующими моменту времени окончания (Out_Time). Основной клип текущего элемента воспроизведения и вспомогательный клип текущего элемента воспроизведения должны мультиплексироваться таким образом, чтобы начинаться с блока представления видео и блока представления аудио, соответствующих моменту времени начала (In_Time).24 and 27, the primary TS and the secondary TS must be created having the same time duration, and the PTS values of the video presentation unit and the audio presentation unit must be created having the same value. In addition, the main clip of the previous playitem and the auxiliary clip of the previous playitem must be multiplexed so as to end with a video presentation unit and an audio presentation unit corresponding to the end time (Out_Time). The main clip of the current playitem and the auxiliary clip of the current playitem must be multiplexed in such a way as to start with the video presentation block and the audio presentation block corresponding to the start time (In_Time).

Дополнительно, эти транспортные потоки должны отвечать следующим условиям:Additionally, these traffic flows must meet the following conditions:

- количеством программ в TS1 и TS2 является одна;- the number of programs in TS1 and TS2 is one;

- количеством видеопотоков является один;- the number of video streams is one;

- количество аудиопотоков является одинаковым;- the number of audio streams is the same;

- содержимое таблицы STN (STN_table) предыдущего элемента воспроизведения является таким же, как у таблицы STN (STN_table) текущего элемента воспроизведения, и- the contents of the STN table (STN_table) of the previous playitem is the same as that of the STN table (STN_table) of the current playitem, and

- периодом воспроизведения транспортного потока в каждом элементе воспроизведения являются три секунды.- the playback period of the transport stream in each playitem is three seconds.

Таковые являются условиями, которые должны быть удовлетворены на уровне транспортных потоков для соединения двух потоков, когда CC=5, а SP_CC=5. Далее, описаны условия, которые должны быть удовлетворены на уровне блока представления видео и блока представления аудио.These are conditions that must be satisfied at the level of transport streams for connecting two streams when CC = 5 and SP_CC = 5. Next, conditions that must be satisfied at the level of the video presentation unit and the audio presentation unit are described.

<Уровень блока представления видео и блока представления аудио><Video Presentation Block and Audio Presentation Block Level>

Хотя начальный момент времени последнего блока представления видео в видеопотоке первичного TS1 первоначально отличен от конечного момента времени первого блока представления видео в видеопотоке первичного TS 2, CC=5 делает начальный момент времени и конечный момент времени совпадающими друг с другом. Когда конечный момент времени и начальный момент времени блоков представления видео сделаны совпадающим друг с другом, становится проблемой, как обрабатывать такие блоки представления видео и блоки представления аудио для синхронного воспроизведения. Это происходит потому, что видео и аудио имеют разные частоты дискретизации, а продолжительности времен блока представления видео и блока представления аудио не совпадают друг с другом.Although the starting time of the last video presentation block in the primary TS1 video stream is initially different from the ending time of the first video representing block in the primary TS 2 video stream, CC = 5 makes the starting time and ending time coincide with each other. When the end point in time and the start time point of the video presentation blocks are made to coincide with each other, it becomes a problem how to process such video presentation blocks and audio presentation blocks for synchronous playback. This is because video and audio have different sampling rates, and the durations of the video presentation block and the audio presentation block do not coincide with each other.

Фиг.28 показывает подробности по CC=5 и SP_CC=5. Уровни с 1 по 3 показывают условие соединения (connection_condition) элемента вспомогательного воспроизведения, а уровни с 4 по 7 показывают условие соединения SP (sp_connection_condition) в элементе воспроизведения. Уровень 4 показывает многочисленные блоки представления видео из TS1 и TS2, а уровень 5 показывает блоки представления аудио в TS1 и блоки представления аудио в TS2. Уровень 6 показывает значения STC в основном клипе. Уровень 7 показывает последовательность исходных пакетов основного клипа.Fig. 28 shows details on CC = 5 and SP_CC = 5. Levels 1 through 3 show the connection condition (connection_condition) of the sub play item, and levels 4 through 7 show the connection condition SP (sp_connection_condition) in the play item. Level 4 shows numerous video presentation blocks from TS1 and TS2, and level 5 shows audio presentation blocks in TS1 and audio presentation blocks in TS2. Level 6 shows the STC values in the main clip. Level 7 shows the sequence of source packets of the main clip.

Заштрихованные части на фигуре изображают блоки представления видео, блоки представления аудио и исходные пакеты TS1, тогда как части без штриховки изображают блоки представления видео, блоки представления аудио и исходные пакеты TS2.The shaded parts in the figure depict video presentation blocks, audio presentation blocks, and TS1 source packets, while the non-shaded parts depict video presentation blocks, audio presentation blocks, and TS2 source packets.

На фигуре CC=5 означает состояние, в котором блоки представления видео выровнены, чтобы иметь общую границу (уровень 4), есть промежуток между ATC в основном клипе (уровень 7), и есть перекрытие между блоками представления аудио в основном клипе (уровень 5). SP_CC=5 означает состояние, в котором есть промежуток между ATC во вспомогательном клипе (уровень 1), и есть перекрытие между блоком представления аудио во вспомогательном клипе (уровень 2).In the figure, CC = 5 means a state in which the video presentation blocks are aligned to have a common border (level 4), there is a gap between the ATCs in the main clip (level 7), and there is an overlap between the audio presentation blocks in the main clip (level 5) . SP_CC = 5 means a state in which there is a gap between the ATCs in the auxiliary clip (level 1), and there is an overlap between the audio presentation block in the auxiliary clip (level 2).

Вышеупомянутая граница между блоками представления видео расположена, с точки зрения TS1, в конечной точке PTS1(1-е окончание)+Tpp последнего блока представления видео уровня 4, и расположена, с точки зрения TS2, в начальной точке PTS2(2-е начало) блока представления видео уровня 4.The aforementioned boundary between the blocks of the video presentation is located, from the point of view of TS1, at the end point PTS1 (1st end) + Tpp of the last block of the presentation of the video level 4, and is located, from the point of view of TS2, at the starting point PTS2 (2nd beginning) video presentation block level 4.

Допустим, что в TS1 конечной точкой блока представления аудио, соответствующей граничному моменту T4 времени, является T5a, а в TS2 начальной точкой блока представления аудио, соответствующей моменту T4 времени, является T3a. Здесь перекрытие блоков представления аудио в основном клипе тянется от T3a до T5a.Assume that in TS1, the endpoint of the audio presentation block corresponding to the boundary time moment T4 is T5a, and in TS2, the starting point of the audio presentation block corresponding to the time moment T4 is T3a. Here, the overlap of the audio presentation blocks in the main clip extends from T3a to T5a.

На фигуре каждый блок представления аудио вспомогательного клипа установлен более продолжительным, чем каждый блок представления аудио основного клипа. Это происходит потому, что аудиопоток вспомогательного клипа установлен обладающим низкой частотой дискретизации, поскольку он поставляется через сеть, и, соответственно, период времени для каждого блока представления аудио становится более длительным. В последовательности пакетов уровня 1 есть промежуток, подобный таковому на уровне 7. К тому же в блоках представления аудио уровня 2 есть перекрытие, подобное таковому на уровне 4. Допустим, что в TS1 вспомогательного клипа конечной точкой блока представления аудио, соответствующей граничному моменту T4 времени, является T5b, а в TS2 вспомогательного клипа начальной точкой блока представления аудио, соответствующей моменту T4 времени, является T3b. Здесь перекрытие тянется от T3b до T5b.In the figure, each sub-audio clip presentation unit is set longer than each sub-clip audio presentation unit. This is because the audio stream of the auxiliary clip is set to have a low sampling rate because it is delivered via the network, and accordingly, the time period for each audio presentation unit becomes longer. In the sequence of level 1 packets, there is a gap similar to that at level 7. In addition, in the level 2 audio presentation blocks there is an overlap similar to that at level 4. Suppose that in TS1 of the auxiliary clip, the end point of the audio representation block corresponding to the boundary time moment T4 is T5b, and in TS2 of the auxiliary clip, the starting point of the audio presentation block corresponding to time point T4 is T3b. Here the overlap extends from T3b to T5b.

Из фигуры можно видеть, что, для того чтобы реализовать CC=5 и SP_CC=5, должны быть удовлетворены следующие четыре условия на уровнях блоков представления видео, блоков представления аудио и пакетов.From the figure it can be seen that, in order to implement CC = 5 and SP_CC = 5, the following four conditions must be satisfied at the levels of video presentation blocks, audio presentation blocks, and packets.

(1) Последний блок представления аудио аудиопотока в TS1 включает в себя выборку, обладающую временем воспроизведения, которое совпадает с концом периода отображения последнего кинокадра в TS1, заданным в предыдущем элементе воспроизведения и предыдущем элементе вспомогательного воспроизведения.(1) The last unit for presenting the audio audio stream in TS1 includes a sample having a playback time that coincides with the end of the display period of the last movie frame in TS1 specified in the previous playitem and the previous auxiliary playitem.

(2) Первый блок представления аудио аудиопотока в TS2 включает в себя выборку, обладающую временем воспроизведения, которое совпадает с началом периода отображения кинокадров первого кинокадра в TS1, заданным в текущем элементе воспроизведения и текущем элементе вспомогательного воспроизведения.(2) The first unit for presenting the audio audio stream in TS2 includes a sample having a playback time that coincides with the start of the display period of the frames of the first movie frame in TS1 specified in the current playitem and the current sub playitem.

(3) Нет никакого промежутка в точке соединения в последовательности блоков представления аудио. Это означает, что перекрытие в последовательности блоков представления аудио может возникать в точке соединения. Однако протяженность такого перекрытия должна быть более короткой, чем период воспроизведения двух аудиокадров.(3) There is no gap at the junction point in the sequence of audio presentation blocks. This means that overlapping in the sequence of audio presentation blocks may occur at the junction point. However, the length of such an overlap should be shorter than the playback period of two audio frames.

(4) Первый пакет TS2 включает в себя PAT, которая может непосредственно сопровождаться одной или более PMT. Если PMT является большим, чем полезная нагрузка пакета TS, DMT может быть поделена на два пакета или более. Пакет TS, хранящий в себе PMT, может включать в себя PCR и SIT.(4) The first TS2 packet includes a PAT, which may be directly followed by one or more PMTs. If the PMT is larger than the payload of the TS packet, the DMT may be divided into two or more packets. A TS packet containing PMT may include PCR and SIT.

<Взаимосвязь момента времени начала (In_Time) и момента времени окончания (Out_Time) с блоком представления видео><The relationship of the start time (In_Time) and the end time (Out_Time) with the video submission unit>

Фиг.29 показывает взаимосвязь между многочисленными блоками представления видео, заданными предыдущим элементом воспроизведения и текущим элементом воспроизведения, многочисленными блоками представления аудио, и временной осью STC. Уровень 1 показывает многочисленные блоки представления видео, принадлежащие TS1, на который указывает ссылкой предыдущий элемент воспроизведения, и многочисленные блоки представления видео, принадлежащие TS2, на который указывает ссылкой текущий элемент воспроизведения. Уровень 2 показывает многочисленные блоки представления аудио, принадлежащие отметке времени, на которую указывает ссылкой предыдущий элемент вспомогательного воспроизведения, и многочисленные блоки представления аудио, принадлежащие TS2, на который указывает ссылкой текущий элемент вспомогательного воспроизведения. Уровень 3 показывает временную ось STC из TS1 в предыдущем элементе вспомогательного воспроизведения и временную ось STC из TS2 в текущем элементе вспомогательного воспроизведения. Как показано на фиг.28, в пределах блоков представления аудио из TS1 и блоков представления аудио из TS2 на уровне 2, участок от начальной точки T3b до конечной точки T5b перекрывается. Момент времени начала (In_Time) текущего элемента вспомогательного воспроизведения и момент времени окончания (Out_Time) предыдущего элемента вспомогательного воспроизведения соответственно задают момент T4 времени, который является границей блоков представления видео. Поскольку момент времени начала (In_Time) текущего элемента вспомогательного воспроизведения и момент времени окончания (Out_Time) элемента вспомогательного воспроизведения также задают момент T4 времени границы блоков представления видео, момент времени начала (In_Time) и момент времени окончания (Out_Time) элемента воспроизведения совпадают с моментом времени начала (In_Time) и моментом времени окончания (Out_Time) элемента вспомогательного воспроизведения. Таким образом, хотя момент времени начала (In_Time) предыдущего элемента вспомогательного воспроизведения и момент времени окончания (Out_Time) текущего элемента вспомогательного воспроизведения записаны на носителе записи, отличном от BD-ROM, можно видеть, что они соответствуют границе блоков представления видео в основном клипе, и также соответствуют моменту времени окончания (Out_Time) предыдущего элемента воспроизведения и моменту времени начала (In_Time) текущего элемента воспроизведения соответственно.Fig. 29 shows the relationship between the plurality of video presentation units defined by the previous playitem and the current playitem, the multiple audio presentation units, and the time axis STC. Level 1 shows multiple video presentation blocks belonging to TS1 referenced by the previous playitem and multiple video presentation blocks belonging to TS2 referenced by the current playitem. Level 2 shows multiple audio presentation units belonging to a time stamp referenced by a previous sub-play item and multiple audio presentation units belonging to TS2 referenced by the current sub-play item. Level 3 shows the time axis STC of TS1 in the previous sub-play item and the time axis STC of TS2 in the current sub-play item. As shown in FIG. 28, within the audio presentation blocks from TS1 and the audio presentation blocks from TS2 at level 2, the portion from the start point T3b to the end point T5b overlaps. The start time (In_Time) of the current sub-play element and the end time (Out_Time) of the previous sub-play element respectively set the time moment T4, which is the boundary of the video presentation blocks. Since the start time (In_Time) of the current sub-play item and the end time (Out_Time) of the sub-play item also set the time moment T4 of the border of the video presentation blocks, the start time (In_Time) and the end time (Out_Time) of the play item coincide with the time the start (In_Time) and the end time (Out_Time) of the sub play item. Thus, although the start time (In_Time) of the previous sub play item and the end time (Out_Time) of the current sub play item are recorded on a recording medium other than the BD-ROM, it can be seen that they correspond to the boundary of the video presentation blocks in the main clip, and also correspond to the end time (Out_Time) of the previous playitem and the start time (In_Time) of the current playitem, respectively.

В этом заключается подробное описание условий, которые должны удовлетворяться на уровне блоков представления видео и блоков представления аудио.This is a detailed description of the conditions that must be satisfied at the level of video presentation blocks and audio presentation blocks.

<Уровень элементарных потоков><Elementary Flow Level>

Последующее описывает условия кодирования на уровне элементарных потоков, для того чтобы реализовать CC=5 и SP_CC=5.The following describes the encoding conditions at the elementary stream level in order to implement CC = 5 and SP_CC = 5.

Следующие условия кодирования должны удовлетворяться на уровне каждого элементарного потока.The following encoding conditions must be satisfied at the level of each elementary stream.

(1) Видеопоток(1) Video Stream

- разрешение видео и частота кадров не изменяются до и после безразрывного соединения, и- the video resolution and frame rate do not change before and after a seamless connection, and

- видеопоток непосредственно после безразрывного соединения заканчивается кодом завершения последовательности (sequence_end_code) (для MPEG-2 Video) и окончанием последовательности RBSP (end_of_sequence_rbsp) (для MPEG-4 AVC).- the video stream immediately after a seamless connection ends with the sequence completion code (sequence_end_code) (for MPEG-2 Video) and the end of the RBSP sequence (end_of_sequence_rbsp) (for MPEG-4 AVC).

(2) Аудиопоток(2) Audio stream

- формат кодирования аудиопотоков, имеющих один и тот же PID, не меняется и- the encoding format of audio streams having the same PID does not change and

- частота дискретизации, битовая скорость квантования и количество каналов не меняются.- sampling frequency, quantization bit rate and number of channels do not change.

(3) Поток PG(3) PG stream

a) Количество потоков PG в TS1 и TS2 является одинаковым.a) The number of PG streams in TS1 and TS2 is the same.

b) Поток PG из TS1 заканчивается функциональным сегментом, названным «End of Display Set» («окончанием набора отображения»).b) The PG stream from TS1 ends with a functional segment called the “End of Display Set”.

c) PTS пакета PES, несущего последний PCS в TS1, указывает момент времени до времени воспроизведения, соответствующего моменту времени окончания (Out_Time) предыдущего элемента воспроизведения и предыдущего элемента вспомогательного воспроизведения.c) The PTS of a PES packet carrying the last PCS in TS1 indicates a point in time before a playback time corresponding to an Out_Time of a previous playitem and a previous sub-playitem.

d) Поток PG из TS2 должен начинаться с набора отображения типа начала Epock или типа продолжения Epock.d) The PG stream from TS2 shall begin with a mapping set of Epock origin type or Epock continuation type.

e) PTS пакета PES, несущего первый PCS в TS2, указывает момент времени в или после времени воспроизведения, соответствующего моменту времени начала (In_Time) текущего элемента воспроизведения и текущего элемента вспомогательного воспроизведения.e) The PTS of the PES packet carrying the first PCS in TS2 indicates a point in time after or after a play time corresponding to a start time (In_Time) of the current playitem and the current sub playitem.

f) Извлечение исходных пакетов из TS1, которое сопровождается извлечением исходных пакетов из TS2, может быть определено в качестве STC1 и STC2 на одной и той же оси системного времени, и нет перекрытия в их значениях DTS/значениях PTS.f) The extraction of source packets from TS1, which is accompanied by the extraction of source packets from TS2, can be defined as STC1 and STC2 on the same system time axis, and there is no overlap in their DTS / PTS values.

(4) Поток IG(4) Stream IG

a) Количество потоков IG в TS1 и TS2 является одинаковым.a) The number of IG streams in TS1 and TS2 is the same.

b) Поток IG из TS1 заканчивается функциональным сегментом, названным «End of Display Set» («окончанием набора отображения»).b) The IG stream from TS1 ends with a functional segment called the “End of Display Set”.

c) PTS пакета PES, несущего последний ICS в TS1, указывает момент времени до времени воспроизведения, соответствующий моменту времени окончания (Out_Time) предыдущего элемента воспроизведения и предыдущего элемента вспомогательного воспроизведения.c) The PTS of a PES packet carrying the last ICS in TS1 indicates a point in time before a playback time corresponding to an Out_Time of a previous playitem and a previous sub playitem.

d) Поток IG из TS2 должен начинаться с набора отображения типа начала Epock или типа продолжения Epock.d) The IG stream from TS2 shall begin with a mapping set of the Epock origin type or Epock continuation type.

e) PTS пакета PES, несущего первый ICS в TS2, указывает момент времени в или после времени воспроизведения, соответствующего моменту времени начала (In_Time) текущего элемента воспроизведения и текущего элемента вспомогательного воспроизведения.e) The PTS of the PES packet carrying the first ICS in TS2 indicates a time point in or after the play time corresponding to the start time (In_Time) of the current playitem and the current sub playitem.

f) Извлечение исходного пакета из TS1, которое сопровождается извлечением исходного пакета из TS2, может быть определено в качестве STC1 и STC2 на одной и той же оси системного времени, и нет перекрытия в их значениях DTS/значениях PTS.f) Retrieving the source packet from TS1, which is accompanied by retrieving the source packet from TS2, can be defined as STC1 and STC2 on the same system time axis, and there is no overlap in their DTS / PTS values.

Для того чтобы соединять предыдущий элемент воспроизведения и текущий элемент воспроизведения при CC=5 и соединять предыдущий элемент вспомогательного воспроизведения и текущий элемент вспомогательного воспроизведения с SP_CC=5, все вышеупомянутые условия для уровней AV-потока, транспортного потока, блоков представления видео и блоков представления аудио, и элементарных потоков должны быть удовлетворены.In order to connect the previous playitem and the current playitem at CC = 5 and connect the previous auxiliary playitem and the current auxiliary playitem with SP_CC = 5, all of the above conditions for the levels of the AV stream, transport stream, video presentation blocks and audio presentation blocks , and elementary flows must be satisfied.

В этом заключается разъяснение информации списка воспроизведения, которая является составляющей содержимого запоминающего устройства локального запоминающего устройства 200.This is an explanation of the information of the playlist, which is a component of the contents of the storage device of the local storage device 200.

В этом заключается разъяснение носителя записи согласно настоящему изобретению. Следующим пояснено устройство воспроизведения по настоящему изобретению.This is an explanation of the recording medium according to the present invention. The following explains the playback device of the present invention.

Фиг.30 показывает внутреннюю структуру устройства воспроизведения по настоящему изобретению. Устройство воспроизведения по настоящему изобретению производится в промышленном масштабе на основании внутренней структуры, показанной на фигуре. Устройство воспроизведения состоит, главным образом, из двух частей - системной БИС (большой интегральной схемы, LSI) и устройства-дисковода, и может выпускаться в промышленном масштабе установкой этих частей в корпусе и основе устройства. Системная БИС является интегральной схемой, которая объединяет многообразие модулей обработки для выполнения функций устройства воспроизведения. Устройство воспроизведения, изготовленное таким способом, содержит: дисковод 1a BD-ROM; буферы 1b и 1c чтения; счетчики 2a и 2c ATC; депакетизаторы 2b и 2d источника; счетчики 2c и 2d ATC; счетчики 3a и 3c STC; фильтры 3b и 3d PID; видеодекодер 4; транспортный буфер (TB) 4a; мультиплексированный буфер (MB) 4b; буфер 4c кодированного кинокадра (CPB); видеодекодер 4d; буфер 4e переупорядочения; коммутатор 4f; видеоплату 5; аудиодекодер 9; транспортный буфер 6; элементарный буфер 7; декодер 8; коммутаторы 10a, 10b, 10c и 10d; декодер 11 интерактивной графики; транспортный буфер (TB) 11a; буфер 11b кодированных данных (CDB); процессор 11c потоковой графики (SGP); буфер 11d объектов; компоновочный буфер 11e; графический контроллер 11f; плату 12 интерактивной графики; декодер 13 демонстрационной графики; транспортный буфер (TB) 13a; буфер 13b кодированных данных (CDB); процессор 13c потоковой графики (SGP); буфер 13d объектов; компоновочный буфер 13e; графический контроллер 13f; плату 14 демонстрационной графики; транспортный буфер 15a; элементарный буфер 15b; декодер 15c; транспортный буфер 16a; элементарный буфер 16b; декодер 16c; модуль 17 синтеза; память 21; контроллер 22; набор 23 PSR; модуль 24 преобразования PID; сетевой модуль 25; модуль 26 приема операций и локальное запоминающее устройство 200.30 shows an internal structure of a reproducing apparatus of the present invention. The reproducing apparatus of the present invention is manufactured on an industrial scale based on the internal structure shown in the figure. The playback device consists mainly of two parts - the system LSI (large integrated circuit, LSI) and the drive device, and can be produced on an industrial scale by installing these parts in the housing and base of the device. System LSI is an integrated circuit that combines a variety of processing modules to perform the functions of a playback device. A reproducing device manufactured in this way comprises: a BD-ROM drive 1a; read buffers 1b and 1c; ATC counters 2a and 2c; depacketizing agents 2b and 2d of the source; 2c and 2d ATC counters; counters 3a and 3c STC; 3b and 3d PID filters; video decoder 4; transport buffer (TB) 4a; multiplexed buffer (MB) 4b; encoded movie frame buffer 4c (CPB); video decoder 4d; reordering buffer 4e; 4f switch video card 5; audio decoder 9; transport buffer 6; elemental buffer 7; decoder 8; switches 10a, 10b, 10c and 10d; interactive graphics decoder 11; transport buffer (TB) 11a; coded data buffer 11b (CDB); processor 11c streaming graphics (SGP); buffer 11d objects; layout buffer 11e; graphics controller 11f; board 12 interactive graphics; demo graphics decoder 13; transport buffer (TB) 13a; coded data buffer 13b (CDB); processor 13c streaming graphics (SGP); buffer 13d objects; layout buffer 13e; graphics controller 13f; board 14 demo graphics; transport buffer 15a; elemental buffer 15b; decoder 15c; transport buffer 16a; elemental buffer 16b; decoder 16c; synthesis module 17; memory 21; controller 22; set of 23 PSR; PID conversion module 24; network module 25; an operation receiving unit 26 and a local storage 200.

Дисковод 1a BD-ROM загружает/выбрасывает BD-ROM и выполняет доступ к BD-ROM.The BD-ROM drive 1a loads / ejects the BD-ROM and accesses the BD-ROM.

Буфер 1b чтения (RB) накапливает последовательности исходных пакетов, считываемые с BD-ROM.Read buffer 1b (RB) accumulates source packet sequences read from the BD-ROM.

Буфер 1c чтения (RB) накапливает последовательности исходных пакетов, считываемые из главы последнего воспроизведения.Read buffer 1c (RB) accumulates source packet sequences read from the last playback chapter.

Счетчик 2a ATC устанавливается в исходное состояние посредством использования ATS исходного пакета, расположенного в начале секции воспроизведения в пределах исходных пакетов, составляющих первичный TS, а позже выводит ATC в депакетизатор 2b источника.The ATC counter 2a is reset by using the ATS of the source packet located at the beginning of the playback section within the source packets constituting the primary TS, and later outputs the ATC to the source depacketizer 2b.

Депакетизатор 2b источника извлекает пакеты TS из исходных пакетов, составляющих первичный TS, и отправляет пакеты TS. При отправке депакетизатор 2b источника регулирует время ввода в декодер согласно ATS каждого пакета TS. Чтобы быть более точным, в момент, когда значение ATC, сформированное счетчиком 2a ATC, становится таким же, как значение ATS исходного пакета, депакетизатор 2b источника пересылает пакет TS только в фильтр 3b PID на скорости записи TS (TS_Recording_Rate).The source depacketizer 2b extracts the TS packets from the source packets constituting the primary TS and sends the TS packets. Upon sending, the source depacketizer 2b adjusts the input time to the decoder according to the ATS of each TS packet. To be more precise, when the ATC value generated by the ATC counter 2a becomes the same as the ATS value of the source packet, the source depacketizer 2b only sends the TS packet to the PID filter 3b at the TS recording speed (TS_Recording_Rate).

Счетчик 2c ATC устанавливается в исходное состояние посредством использования ATS исходного пакета, расположенного в начале секции воспроизведения в пределах исходных пакетов, составляющих вторичный TS, а позже выводит ATC в депакетизатор 2d источника.The ATC counter 2c is reset by using the ATS of the source packet located at the beginning of the playback section within the source packets constituting the secondary TS, and later outputs the ATC to the source depacketizer 2d.

Депакетизатор 2d источника извлекает пакеты TS из исходных пакетов, составляющих вторичный TS, и отправляет пакеты TS. При отправке депакетизатор 2d источника регулирует время ввода в декодер согласно ATS каждого пакета TS. Чтобы быть более точным, в момент, когда значение ATC, сформированное счетчиком 2c ATC, становится таким же, как значение ATS исходного пакета, депакетизатор 2d источника пересылает пакет TS только в фильтр 3d PID на скорости записи TS (TS_Recording_Rate).The source depacketizer 2d extracts the TS packets from the source packets constituting the secondary TS, and sends the TS packets. Upon sending, the source depacketizer 2d adjusts the input time to the decoder according to the ATS of each TS packet. To be more precise, when the ATC value generated by the ATC counter 2c becomes the same as the ATS value of the source packet, the source depacketizer 2d only sends the TS packet to the 3d PID filter at the TS recording speed (TS_Recording_Rate).

Счетчик 3a STC устанавливается в исходное состояние посредством PCR первичного TS и выводит STC.The STC counter 3a is reset by the PCR of the primary TS and outputs the STC.

Фильтр 3b PID является блоком демультиплексирования для первичного TS и выводит из числа исходных пакетов, выведенных из депакетизатора 2b источника, таковые, имеющие опорные значения PID, сообщенные модулем 24 преобразования PID, в видеодекодер 4, аудиодекодер 9, декодер 11 интерактивной графики 11 и декодер 13 демонстрационной графики. Каждый из декодеров принимает элементарные потоки, пропущенные через фильтр 3b PID, и выполняет от обработки декодирования до обработки воспроизведения согласно PCR первичного TS (временной оси STC1). Таким образом, элементарные потоки, введенные в каждый декодер после прохождения через фильтр 3b PID, подвергаются декодированию и воспроизведению на основании PCR первичного TS.The PID filter 3b is a demultiplexing unit for the primary TS and deduces from the number of source packets output from the source depacketizer 2b those having PID reference values reported by the PID conversion module 24 to video decoder 4, audio decoder 9, interactive graphics decoder 11 and decoder 13 demo graphics. Each of the decoders receives elementary streams passed through the PID filter 3b and performs from decoding processing to reproduction processing according to the PCR of the primary TS (time axis STC1). Thus, the elementary streams introduced into each decoder after passing through the PID filter 3b are decoded and reproduced based on the PCR of the primary TS.

Счетчик 3c STC устанавливается в исходное состояние посредством PCR вторичного TS и выводит STC. Фильтр 3d PID выполняет демультиплексирование с опорой на этот STC.The STC counter 3c is reset by the PCR of the secondary TS and outputs the STC. The 3d PID filter performs demultiplexing based on this STC.

Фильтр 3d PID является блоком демультиплексирования для вспомогательного клипа и выводит из числа исходных пакетов, выведенных из депакетизатора 2d источника, таковые, имеющие опорные значения PID, сообщенные модулем 24 преобразования PID, в аудиодекодер 9, декодер 11 интерактивной графики 11 и декодер 13 демонстрационной графики. Таким образом, элементарные потоки, введенные в каждый декодер после прохождения через фильтр 3d PID, подвергаются декодированию и воспроизведению на основании PCR вторичного TS.The 3d PID filter is a demultiplexing unit for the auxiliary clip and deduces from the source packets output from the source depacketizer 2d those having PID reference values reported by the PID conversion module 24 to an audio decoder 9, an interactive graphics decoder 11, and a demo graphic decoder 13. Thus, the elementary streams introduced into each decoder after passing through the 3d PID filter are decoded and reproduced based on the PCR of the secondary TS.

Как описано при разъяснении носителя записи, приведенном выше, момент времени начала (In_Time) и момент времени окончания (Out_Time) элемента воспроизведения соответствуют моменту времени начала (In_Time) и моменту времени окончания (Out_Time) элемента вспомогательного воспроизведения. Поэтому если счетчики 2a и 2c ATC содержат одно и то же значение (время) и отсчитывают время с одной и той же скоростью, временные оси первичного TS и вторичного TS становятся выровненными друг с другом. Как результат, первичный TS и вторичный TS, составляющие приложение сверхуплотнения могут обрабатываться как одиночный поток. В дополнение, временные оси ATC, показывающие моменты времени ввода данных в декодер, могут быть синхронизированы, и также могут быть синхронизированы временные оси STC, показывающие временную развертку декодера.As described in the explanation of the recording medium above, the start time (In_Time) and the end time (Out_Time) of the playitem correspond to the start time (In_Time) and the end time (Out_Time) of the sub playitem. Therefore, if the ATC counters 2a and 2c contain the same value (time) and count the time at the same speed, the time axes of the primary TS and secondary TS become aligned with each other. As a result, the primary TS and secondary TS constituting the overcompression application can be processed as a single stream. In addition, the ATC time axes showing time instants of data input to the decoder can be synchronized, and STC time axes showing the time base of the decoder can also be synchronized.

Согласно синхронизации временных осей ATC, вышеупомянутые два депакетизатора источника могут обрабатывать соответственно исходные пакеты, считанные с BD-ROM, и исходные пакеты, считанные из локального запоминающего устройства.According to the ATC time axis synchronization, the aforementioned two source depacketizers can process source packets read from the BD-ROM and source packets read from the local storage, respectively.

Счетчики 3a и 3c STC содержат одинаковое время и отсчитывают время с одинаковой скоростью согласно синхронизации временных осей STC, а потому два TS могут обрабатываться как одиночный TS. Поскольку декодер устройства воспроизведения работает на единой временной оси STC, управление временем STC может быть стандартизовано таким же образом, как когда выполняется обычное воспроизведение только первичного TS. Наличие возможности заставлять все, видеодекодер 4, декодер 11 IG, декодер 13 PG, системные декодеры 15c и 16c и аудиодекодер 9, работать на одной и той же временной оси STC, является желательным с точки зрения усовершенствования устройств воспроизведения, так как управление является в точности таким же, как используемое в обычных устройствах воспроизведения, которые выполняют воспроизведение только BD-ROM. Более того, когда выполняется авторская разработка, состояние буфера может соблюдаться посредством управления временной привязкой ввода одного TS, тем самым, облегчая проверку на стадии авторской разработки.Counters 3a and 3c of the STCs contain the same time and count the time at the same speed according to the synchronization of the time axes of the STC, and therefore two TSs can be processed as a single TS. Since the decoder of the reproducing apparatus operates on a single STC time axis, the STC time management can be standardized in the same way as when normal reproduction of only the primary TS is performed. Having the ability to make everything, video decoder 4, decoder 11 IG, decoder 13 PG, system decoders 15c and 16c and audio decoder 9, work on the same time axis STC, is desirable from the point of view of improving playback devices, since the control is exactly the same as used in conventional playback devices that only play back BD-ROMs. Moreover, when the authoring is performed, the state of the buffer can be observed by controlling the timing of the input of one TS, thereby facilitating verification at the authoring stage.

Видеодекодер 4 декодирует многочисленные пакеты PES, выведенные из фильтра 3b PID, получает несжатые кинокадры и записывает кинокадры в видеоплату 5. Видеодекодер 4 состоит из транспортного буфера 4a, мультиплексированного буфера 4b, элементарного буфера 4c, декодера 4d, буфера 4e переупорядочения и коммутатора 4f.Video decoder 4 decodes the numerous PES packets output from the PID filter 3b, receives uncompressed motion pictures, and writes the motion pictures to video card 5. Video decoder 4 consists of transport buffer 4a, multiplexed buffer 4b, elementary buffer 4c, decoder 4d, reorder buffer 4e, and switch 4f.

Транспортный буфер (TB) 4a является буфером, в котором пакеты TS, принадлежащие видеопотоку, временно накапливаются после того, как выводятся из фильтра 3b PID.The transport buffer (TB) 4a is a buffer in which TS packets belonging to the video stream are temporarily accumulated after being output from the PID filter 3b.

Мультиплексированный буфер (MB) 4b является буфером, в котором пакеты PES временно накапливаются, когда видеопоток выводится из транспортного буфера 4a в элементарный буфер 4c.Multiplexed buffer (MB) 4b is a buffer in which PES packets are temporarily accumulated when a video stream is output from transport buffer 4a to elementary buffer 4c.

Элементарный буфер (EB) 4c является буфером, в котором хранятся кинокадры в кодированном состоянии (I-кинокадры, B-кинокадры, P-кинокадры).The elementary buffer (EB) 4c is a buffer in which the motion pictures are stored in the encoded state (I-motion pictures, B-motion pictures, P-motion pictures).

Декодер (DEC.) 4d получает многочисленные изображения кадров декодированием отдельных изображений кадров элементарного потока видео для каждого момента времени кодирования (DTS) и записывает изображения кадров в видеоплату 5.A decoder (DEC.) 4d receives multiple frame images by decoding individual frame images of a video elementary stream for each encoding time (DTS) and writes frame images to the video card 5.

Буфер 4e переупорядочения является буфером, используемым для изменения очередности декодированных кинокадров, так что они компонуются в порядке отображения.The reordering buffer 4e is a buffer used to change the order of decoded movie frames so that they are arranged in a display order.

Коммутатор 4f реализует изменение очередности декодированных кинокадров, так что они компонуются в порядке отображения.Switch 4f implements a change in the order of decoded movie frames so that they are arranged in display order.

Видеоплата 5 является платой для хранения в ней несжатых кинокадров. Плата является пространством памяти устройства воспроизведения для данных пикселей с емкостью одиночного экрана. Разрешением видеоплаты 5 является 1920×1080, и данные кинокадра, сохраненные в видеоплате 5, состоят из данных пикселей, представленных 16-битным YUV (форматом «яркость - цветность синего - цветность красного»).Video card 5 is a card for storing uncompressed motion pictures in it. The board is the memory space of the playback device for these pixels with a capacity of a single screen. The resolution of video card 5 is 1920 × 1080, and the motion picture data stored in video card 5 consists of pixel data represented by 16-bit YUV (format “brightness - color blue - color red”).

Аудиодекодер 9 состоит из транспортного буфера 6, элементарного буфера 7 и декодера 8 и декодирует аудиопоток.The audio decoder 9 consists of a transport buffer 6, an elementary buffer 7, and a decoder 8 and decodes the audio stream.

Транспортный буфер 6 хранит в нем пакеты TS, выведенные из фильтра 3b PID, способом «первым вошел - первым вышел» и отправляет пакеты TS в аудиодекодер 8.The transport buffer 6 stores in it TS packets outputted from the PID filter 3b in a “first in, first out” manner and sends the TS packets to the audio decoder 8.

Элементарный буфер 7 хранит в нем из числа пакетов TS, выведенных из фильтра 3b PID, только имеющие PID аудиопотока, который должен воспроизводиться способом «первым вошел - первым вышел», и отправляет их в аудиодекодер 8.The elementary buffer 7 stores in it, from among the TS packets output from the PID filter 3b, only those having the PID of the audio stream, which must be reproduced in a “first in, first out” manner, and sends them to the audio decoder 8.

Декодер 8 преобразует пакеты TS, сохраненные в транспортном буфере 6, в пакеты PES, декодирует пакеты PES, чтобы получить несжатые аудиоданные в состоянии LPCM, и выводит полученные аудиоданные.Decoder 8 converts the TS packets stored in transport buffer 6 into PES packets, decodes the PES packets to obtain uncompressed audio data in the LPCM state, and outputs the received audio data.

Коммутатор 10a избирательно выдает пакеты TS, считанные с BD-ROM, или пакеты TS, считанные из локального запоминающего устройства 200, в видеодекодер 4.The switch 10a selectively provides TS packets read from the BD-ROM or TS packets read from the local storage 200 to the video decoder 4.

Коммутатор 10b избирательно выдает пакеты TS, считанные с BD-ROM, или пакеты TS, считанные из локального запоминающего устройства 200, в декодер 11 интерактивной графики.Switch 10b selectively provides TS packets read from the BD-ROM, or TS packets read from local storage 200 to interactive graphics decoder 11.

Коммутатор 10c избирательно выдает пакеты TS, считанные с BD-ROM, или пакеты TS, считанные из локального запоминающего устройства 200, в декодер 13 демонстрационной графики.The switch 10c selectively provides TS packets read from the BD-ROM or TS packets read from the local storage 200 to the demo graphic decoder 13.

Декодер 11 интерактивной графики (IG) декодирует поток IG, считанный с BD-ROM 100 или локального запоминающего устройства 200, и записывает несжатую графику в плату 12 IG. Декодер 11 IG состоит из транспортного буфера (TB) 11a, буфера 11b кодированных данных (CDB), процессора 11c потоковой графики (SGP), буфера 11d объектов, компоновочного буфера 11e и графического контроллера (Ctrl) 11f.The interactive graphics (IG) decoder 11 decodes the IG stream read from the BD-ROM 100 or the local storage device 200, and writes uncompressed graphics to the IG board 12. The IG decoder 11 consists of a transport buffer (TB) 11a, a coded data buffer (CDB) 11b, a streaming graphics processor (SGP) 11c, an object buffer 11d, a layout buffer 11e, and a graphics controller (Ctrl) 11f.

Транспортный буфер (TB) 11a является буфером, в котором временно накапливаются пакеты TS, принадлежащие потоку IG.Transport buffer (TB) 11a is a buffer in which TS packets belonging to the IG stream are temporarily accumulated.

Буфер 11b кодированных данных (CDB) является буфером, в котором пакеты PES, составляющие поток IG.The coded data buffer (CDB) 11b is a buffer in which the PES packets constituting the IG stream.

Процессор 11c потоковой графики (SGP) декодирует пакеты PES, хранящие в них графические данные, и записывает несжатое побитовое отображение, состоящее из индексных цветов, полученных обработкой декодирования, в буфер 11d объектов в качестве графического объекта.Stream graphic processor (SGP) 11c decodes the PES packets storing the graphic data therein and writes an uncompressed bitmap consisting of index colors obtained by decoding processing to the object buffer 11d as a graphic.

В буфере 11d объектов, размещается графический объект, полученный обработкой декодированием, выполненной процессором 11c потоковой графики.In the object buffer 11d, a graphic object is received obtained by decoding processing performed by the stream graphics processor 11c.

Компоновочный буфер 11e является памятью, в которой размещена управляющая информация для прорисовывания графических данных.The layout buffer 11e is a memory in which control information for drawing graphic data is stored.

Графический контроллер (Ctrl) 11f декодирует управляющую информацию, размещенную в компоновочном буфере 11e, и выполняет управление на основании результата обработки декодированием.The graphics controller (Ctrl) 11f decodes the control information located in the layout buffer 11e, and performs control based on the result of decoding processing.

В плату 12 интерактивно графики (IG) записывается несжатая графика, полученная обработкой декодированием декодера 11 IG.On the interactive graphics (IG) board 12, uncompressed graphics obtained by the decoding processing of the IG decoder 11 are recorded.

Декодер 13 демонстрационной графики (PG) декодирует поток PG, считанный с BD-ROM или локального запоминающего устройства 200, и записывает несжатую графику в плату 14 демонстрационной графики. Декодер 13 PG состоит из транспортного буфера (TB) 13a, буфера 13b кодированных данных (CDB), процессора 13c потоковой графики (SGP), буфера 13d объектов (OB), компоновочного буфера 13e (CB) и графического контроллера 13f (Ctrl).The demo graphics decoder (PG) 13 decodes the PG stream read from the BD-ROM or local storage 200 and writes uncompressed graphics to the demo graphics board 14. The PG decoder 13 consists of a transport buffer (TB) 13a, a coded data buffer (CDB) 13b, a streaming graphics processor (SGP) 13c, an object buffer (OB) 13d, a layout buffer 13e (CB), and a graphics controller 13f (Ctrl).

Транспортный буфер (TB) 13a является буфером, в котором пакеты TS, принадлежащие потоку PG, временно накапливаются после того, как вводятся из фильтра 4 PID.Transport buffer (TB) 13a is a buffer in which TS packets belonging to the PG stream are temporarily accumulated after being entered from the PID filter 4.

Буфер 13b кодированных данных (CDB) является буфером, в котором пакеты PES, составляющие поток PG.A coded data buffer (CDB) 13b is a buffer in which PES packets constituting a PG stream.

Процессор 13c потоковой графики (SGP) декодирует пакеты PES (ODS), хранящие в них графические данные, и записывает несжатое побитовое отображение, состоящее из индексных цветов, полученных обработкой декодированием, в буфер 13d объектов в качестве графического объекта.Stream graphics processor (SGP) 13c decodes PES packets (ODS) storing graphics data therein and writes an uncompressed bitmap consisting of index colors obtained by decoding processing to an object buffer 13d as a graphics object.

В буфере 13d объектов размещается графический объект, полученный обработкой декодированием, выполненной процессором 13c потоковой графики.In the object buffer 13d, a graphic object is obtained obtained by decoding processing performed by the stream graphics processor 13c.

Компоновочный буфер 13e (CB) является памятью, в которой размещена управляющая информация (PCS) для прорисовывания графических данных.The layout buffer 13e (CB) is a memory that stores control information (PCS) for drawing graphic data.

Графический контроллер 13f (Ctrl) декодирует PCS, размещенный в компоновочном буфере 13e, и выполняет управление на основании результата обработки декодированием.The graphics controller 13f (Ctrl) decodes the PCS located in the layout buffer 13e and performs control based on the result of the decoding processing.

Плата 14 демонстрационной графики (PG) является памятью, содержащей область емкости одиночного экрана, и способна хранить в ней несжатую графику с емкостью одиночного экрана.The demo graphics (PG) board 14 is a memory containing a single-screen capacitance region and is capable of storing uncompressed graphics with a single-screen capacitance therein.

Системный декодер 15 обрабатывает пакеты управления системой (PAT и PMT) вторичного TS и управляет взятыми в целом декодерами.The system decoder 15 processes the system control packets (PAT and PMT) of the secondary TS and manages the decoders taken as a whole.

Транспортный буфер 15a хранит в нем пакеты управления системой (PAT и PMT), присутствующие в первичном TS.The transport buffer 15a stores in it system control packets (PAT and PMT) present in the primary TS.

Элементарный буфер 15b отправляет пакеты управления системой в декодер 15c.The elementary buffer 15b sends system control packets to the decoder 15c.

Декодер 15c декодирует пакеты управления системой, сохраненные в элементарном буфере 15b.The decoder 15c decodes the system control packets stored in the elementary buffer 15b.

Транспортный буфер 16a хранит в нем пакеты управления системой, присутствующие во вторичном TS.The transport buffer 16a stores in it system control packets present in the secondary TS.

Элементарный буфер 16b отправляет пакеты управления системой вторичного TS в декодер 16c.The elementary buffer 16b sends the secondary TS system control packets to the decoder 16c.

Декодер 16c декодирует пакеты управления системой, сохраненные в элементарном буфере 16b.The decoder 16c decodes the system control packets stored in the elementary buffer 16b.

Память 21 является памятью для хранения в ней текущей информации списка воспроизведения и текущей информации о клипах. Текущая информация списка воспроизведения является информацией списка воспроизведения, которая обрабатывается в текущий момент, из числа множества частей информации списка воспроизведения, хранимой на BD-ROM. Текущая информация о клипах является информацией о клипах, которая обрабатывается в текущий момент, из числа множества частей информации о клипах, хранимой на BD-ROM/локальном запоминающем устройстве.The memory 21 is a memory for storing current playlist information and current clip information therein. The current playlist information is the playlist information that is currently being processed from among the plurality of pieces of playlist information stored on the BD-ROM. The current clip information is clip information that is currently being processed from among the plurality of pieces of clip information stored on the BD-ROM / local storage device.

Контроллер 22 достигает управления воспроизведением BD-ROM посредством выполнения воспроизведения списка воспроизведения (то есть управления воспроизведением в соответствии с текущей информацией списка воспроизведения). Контроллер 22 также выполняет вышеупомянутое управление над ATS и STC. При этом управлении контроллер 22 выполняет операцию предварительного чтения, чтобы заблаговременно считывать за период в 1 секунду исходные пакеты с BD-ROM или локального запоминающего устройства в буфер или декодер. Выполнением этой операции предварительного чтения может гарантироваться предотвращение отрицательного переполнения и переполнения благодаря вышеупомянутому управлению окном.The controller 22 achieves the playback control of the BD-ROM by performing playback of the playlist (i.e., playback control in accordance with the current information of the playlist). The controller 22 also performs the above control on the ATS and STC. With this control, the controller 22 performs a preliminary read operation to read in advance for a period of 1 second the source packets from the BD-ROM or local storage device into a buffer or decoder. By performing this pre-reading operation, the prevention of negative overflow and overflow can be guaranteed due to the aforementioned window control.

Набор 23 PSR является регистром, встроенным в устройство воспроизведения, и состоит из 64 штук регистров настроек/состояния плеера (PSR) и 4096 штук регистров общего назначения (GPR). Среди значений (PSR), установленных в регистрах настроек/состояния проигрывателя, с PSR4 по PSR8 используются для представления текущей точки воспроизведения.Set 23 PSR is a register built into the playback device, and consists of 64 pieces of player settings / status registers (PSR) and 4096 pieces of general purpose registers (GPR). Among the values (PSR) set in the player's settings / status registers, PSR4 through PSR8 are used to represent the current playback point.

Модуль 24 преобразования PID преобразует аудиопотоки и номера потоков аудиопотоков, сохраненные в наборе 23 PSR, в опорные значения PID на основании таблицы STN (STN_table), и сообщает опорные значения PID по результатам преобразования в фильтры 3b и 3d PID.The PID conversion unit 24 converts the audio streams and audio stream stream numbers stored in the PSR set 23 to the PID reference values based on the STN table (STN_table), and reports the PID reference values from the conversion results to the PID filters 3b and 3d.

Сетевой модуль 25 выполняет функцию связи устройства воспроизведения. Когда задан URL, модуль 25 связи устанавливает TCP-соединение или FTP-соединение с web-сайтом по заданному URL. Установление такого соединения предусматривает загрузку с web-сайтов.The network module 25 performs the communication function of the playback device. When a URL is specified, the communication module 25 establishes a TCP connection or an FTP connection to the website at the specified URL. Establishing such a connection involves downloading from web sites.

Модуль 26 приема операций принимает описание операции, выполняемой пользователем на пульте дистанционного управления, и сообщает информацию об операции пользователя, которая указывает операцию, заданную пользователем, в контроллер 22.The operation receiving unit 26 receives a description of the operation performed by the user on the remote control, and reports information about the user's operation, which indicates the operation specified by the user, to the controller 22.

В этом заключается описание внутренней структуры устройства воспроизведения. Последующее описывает реализацию контроллера 22 в устройстве воспроизведения. Контроллер 22 может быть реализован в устройстве воспроизведения посредством создания программы, которая побуждает ЦП (центральный процессор, CPU) выполнять последовательность операций по блок-схемам последовательностей операций способов, показанным на фиг.31 и 32, записи программы в ПЗУ (постоянное запоминающее устройство, ROM) и отправки ее в ЦП.This is a description of the internal structure of the playback device. The following describes the implementation of the controller 22 in the playback device. The controller 22 can be implemented in the playback device by creating a program that causes the CPU (central processing unit, CPU) to perform the sequence of operations according to the flowcharts of the sequence of operations of the methods shown in Figs. 31 and 32, recording the program in ROM (read-only memory, ROM ) and sending it to the CPU.

Фиг.31 - блок-схема последовательности операций способа, показывающая процедуру воспроизведения на основании информации списка воспроизведения. Блок-схема последовательности операций способа показывает циклическую структуру, в которой файл.mpls, структурирующий информацию списка воспроизведения, считывается (этап S11), элемент воспроизведения в начале информации списка воспроизведения устанавливается в качестве текущего элемента воспроизведения (этап S12), и этапы с S13 по S25 повторяются для текущего элемента воспроизведения. Эта циклическая структура содержит этап S23 в качестве условия завершения. Дисковод BD-ROM инструктируется для считывания блоков доступа, начиная с соответствующего моменту времени начала (In_Time) и заканчивая соответствующим моменту времени окончания (Out_Time) текущего элемента воспроизведения (этап S13). Производится оценка, присутствует ли предыдущий элемент воспроизведения в текущем элементе воспроизведения (этап S14). Этап S15 или этапы с S16 по S21 выполняются избирательно согласно результатам оценки. Чтобы быть более точным, если текущий элемент воспроизведения не имеет предыдущего элемента воспроизведения (этап S14: Нет), декодер инструктируется для выполнения воспроизведения с момента времени начала элемента воспроизведения (PlayItem_In_Time) до момента времени окончания элемента воспроизведения (PlayItem_Out_Time) (Этап S15).Fig. 31 is a flowchart showing a reproducing procedure based on the information of the playlist. The flowchart shows a cyclic structure in which the.mpls file structuring the playlist information is read (step S11), the playitem at the beginning of the playlist information is set as the current playitem (step S12), and steps S13 to S25 is repeated for the current playitem. This cyclic structure contains step S23 as a termination condition. The BD-ROM drive is instructed to read the access units, starting from the corresponding start time point (In_Time) and ending with the corresponding end time point (Out_Time) of the current playitem (step S13). An assessment is made whether the previous playitem is present in the current playitem (step S14). Step S15 or steps S16 to S21 are performed selectively according to the evaluation results. To be more precise, if the current playitem does not have a previous playitem (step S14: No), the decoder is instructed to perform playback from the start time of the playitem (PlayItem_In_Time) to the end time of the playitem (PlayItem_Out_Time) (Step S15).

Если текущий элемент воспроизведения имеет предыдущий элемент воспроизведения (этап S14: Да), производится оценка, находится ли текущий элемент воспроизведения в состоянии CC=5 (этап S16). Когда CC=5 (этап S16: Да), выполняется обработка по этапам с S17 по S20.If the current playitem has a previous playitem (step S14: Yes), an assessment is made whether the current playitem is in the state CC = 5 (step S16). When CC = 5 (step S16: Yes), the processing of steps S17 to S20 is performed.

Когда предыдущий элемент воспроизведения, приведенный выше, присутствует, последовательность ATC (ATC_Sequence) в основном клипе переключается. Для переключения последовательности ATC (ATC_Sequence), рассчитывается (этап S17) значение смещения для первичного TS, названное дельтой 1 ATC (ATC_delta1). Значение ATC (ATC2) для новой последовательности ATC (ATC_Sequence) получается добавлением дельты 1 ATC (ATC_delta1) к значению ATC (ATC1) первоначальной последовательности ATC (ATC_Sequence) (этап S18).When the previous playitem above is present, the ATC sequence (ATC_Sequence) in the main clip is switched. To switch the ATC sequence (ATC_Sequence), the offset value for the primary TS, called ATC delta 1 (ATC_delta1), is calculated (step S17). The ATC value (ATC2) for the new ATC sequence (ATC_Sequence) is obtained by adding the ATC delta 1 (ATC_delta1) to the ATC value (ATC1) of the original ATC sequence (ATC_Sequence) (step S18).

В дополнение, когда предыдущий элемент воспроизведения, приведенный выше, присутствует, переключается последовательность STC (STC_Sequence) в первичном TS. Для переключения последовательности STC (STC_Sequence), рассчитывается (этап S19) значение смещения, названное дельтой 1 STC (STC_delta1). Значение STC (STC2) для новой последовательности STC (STC_Sequence) получается добавлением дельты 1 STC (STC_delta1) к значению STC (STC1) первоначальной последовательности STC (STC_Sequence) (этап S20).In addition, when the previous playitem above is present, the STC sequence (STC_Sequence) in the primary TS is switched. To switch the STC sequence (STC_Sequence), an offset value, called STC delta 1 (STC_delta1), is calculated (step S19). The STC value (STC2) for the new STC sequence (STC_Sequence) is obtained by adding delta 1 STC (STC_delta1) to the STC value (STC1) of the initial STC sequence (STC_Sequence) (step S20).

После того как аудиодекодер 9 инструктируется для подавления перекрытия аудио, декодер инструктируется для выполнения воспроизведения с момента времени начала элемента воспроизведения (PlayItem_In_Time) до момента времени окончания элемента воспроизведения (PlayItem_Out_Time) (этап S21). Когда текущий элемент воспроизведения не находится в состоянии CC=5, выполняется обработка CC=1 и CC=6.After the audio decoder 9 is instructed to suppress the overlap of the audio, the decoder is instructed to perform playback from the start time of the playitem (PlayItem_In_Time) to the end time of the playitem (PlayItem_Out_Time) (step S21). When the current playitem is not in the state CC = 5, processing CC = 1 and CC = 6 is performed.

После того как выполнена любая одна из обработки по этапу S15 и обработки по этапам с S16 по S21, выполняется обработка по этапу S25. Этапом S25 является последовательность операций проверки, должен ли элемент вспомогательного воспроизведения воспроизводиться синхронно с текущим элементом воспроизведения. Здесь элемент вспомогательного воспроизведения, составляющий информацию о вспомогательном пути, содержит информацию, названную Id синхронизации с элементом воспроизведения (Sync_PlayItem_Id), и Sync_PlayItem_Id элемента вспомогательного воспроизведения, который должен воспроизводиться синхронно с текущим элементом воспроизведения, устанавливается в этот текущий элемент воспроизведения. Поэтому на этапе S25 делается проверка, присутствует ли в многочисленных элементах вспомогательного воспроизведения, составляющих информацию о вспомогательном пути, элемент вспомогательного воспроизведения, чей Sync_PlayItem_Id был установлен в текущий элемент воспроизведения.After any one of the processing in step S15 and the processing in steps S16 to S21 are performed, the processing in step S25 is performed. Step S25 is a flowchart of checking whether the sub-play item should be played synchronously with the current play item. Here, the sub-play element constituting the sub-path information contains information called Id of synchronization with the play element (Sync_PlayItem_Id), and Sync_PlayItem_Id of the sub-play element to be played synchronously with the current play element is set to this current play element. Therefore, in step S25, a check is made to see if, in the multiple sub-play elements constituting the sub-path information, the sub-play element whose Sync_PlayItem_Id has been set to the current playback element.

Если никакого такого элемента вспомогательного воспроизведения не присутствует, последовательность операций переходит на этап S22. На этапе 22 делается оценка, достигает ли текущее время воспроизведения (текущее PTM (время представления)) на временной оси AV-клипа момента времени окончания (Out_Time) текущего элемента воспроизведения (этап 22). Если оно достигло, последовательность операций переходит на этап S23. На этапе S23 производится оценка, является ли текущий элемент воспроизведения последним элементом воспроизведения информации списка воспроизведения. Если он не является последним элементом воспроизведения, следующий элемент воспроизведения в информации списка воспроизведения устанавливается в качестве текущего элемента воспроизведения (Step S24), а последовательность операций переходит на этап S13. Таким способом, обработка по этапам S13-S24 выполняется над всеми элементами воспроизведения в информации списка воспроизведения.If no such sub-play element is present, the flow proceeds to step S22. At step 22, an assessment is made whether the current playback time (current PTM (presentation time)) on the time axis of the AV clip reaches the Out_Time of the current playitem (step 22). If it has reached, the flow proceeds to step S23. At step S23, an assessment is made whether the current playitem is the last playitem of the playlist information. If it is not the last playitem, the next playitem in the playlist information is set as the current playitem (Step S24), and the flow proceeds to step S13. In this way, the processing in steps S13-S24 is performed on all the playitems in the playlist information.

Фиг.32 - блок-схема последовательности операций способа, показывающая процедуру обработки безразрывного соединения элементов вспомогательного воспроизведения.32 is a flowchart showing a process for processing a seamless connection of sub-play elements.

Когда на этапе S25 определено, что присутствует элемент вспомогательного воспроизведения, чей Sync_PlayItem_Id установлен в текущий элемент воспроизведения, элемент вспомогательного воспроизведения устанавливается в качестве текущего элемента вспомогательного воспроизведения (этап S31). Локальное запоминающее устройство 200 инструктируется для вывода блоков доступа, начиная с соответствующего моменту времени начала (In_Time) элемента вспомогательного воспроизведения и заканчивая соответствующим моменту времени окончания (Out_Time) (этап S32). Затем производится оценка, присутствует ли предыдущий элемент вспомогательного воспроизведения в текущем элементе воспроизведения (этап S33), и один из этапа S34, этапа S35 и этапов S36-S41 избирательно выполняется согласно результату оценки. Чтобы быть более точным, если предыдущий элемент вспомогательного воспроизведения не присутствует в текущем элементе воспроизведения (этап S33: Нет), ожидается до тех пор, пока текущий PTM не достигает начального PTS синхронизации элемента воспроизведения (Sync_Start_Pts_of_PlayItem) (этап S34). Когда текущий PTM его достиг, декодер инструктируется для воспроизведения с момента времени начала элемента вспомогательного воспроизведения (SubPlayItem_In_Time) до момента времени окончания элемента вспомогательного воспроизведения (SubPlayItem_Out_Time) (этап S35).When it is determined in step S25 that there is a sub play item whose Sync_PlayItem_Id is set to the current play item, the sub play item is set as the current sub play item (step S31). The local storage device 200 is instructed to output access units, starting from the corresponding start time point (In_Time) of the sub play element and ending with the corresponding end time point (Out_Time) (step S32). An assessment is then made whether the previous sub-playitem is present in the current playitem (step S33), and one of step S34, step S35, and steps S36-S41 is selectively performed according to the evaluation result. To be more precise, if the previous sub-playitem is not present in the current playitem (step S33: No), it is expected until the current PTM reaches the initial PTS of the playitem synchronization (Sync_Start_Pts_of_PlayItem) (step S34). When the current PTM has reached it, the decoder is instructed to play from the start time of the sub play item (SubPlayItem_In_Time) to the end time of the sub play item (SubPlayItem_Out_Time) (step S35).

Когда предыдущий элемент вспомогательного воспроизведения присутствует в текущем элементе воспроизведения (этап S33: Да), производится оценка, находится ли текущий элемент воспроизведения в состоянии SP_CC=5 (этап S36). Когда он находится в состоянии SP_CC=5 (этап S36: Да), выполняется обработка по этапам S37-S41.When the previous sub-playitem is present in the current playitem (step S33: Yes), it is judged whether the current playitem is in the state SP_CC = 5 (step S36). When it is in the state SP_CC = 5 (step S36: Yes), the processing of steps S37-S41 is performed.

Когда текущий элемент воспроизведения имеет предыдущий элемент вспомогательного воспроизведения, последовательность ATC (ATC_Sequence) переключается. Для переключения последовательности ATC (ATC_Sequence), рассчитывается значение смещения для вторичного TS, названное дельтой 2 ATC (ATC_delta2) (этап S37), и получается значение ATC (ATC2) для новой последовательности ATC (ATC_Sequence) добавлением дельты 1 ATC (ATC_delta1) к значению ATC (ATC1) первоначальной последовательности ATC (ATC_Sequence) (этап S38).When the current playitem has the previous subtitle, the ATC sequence (ATC_Sequence) is switched. To switch the ATC sequence (ATC_Sequence), the offset value for the secondary TS called delta 2 ATC (ATC_delta2) is calculated (step S37), and the ATC value (ATC2) for the new ATC sequence (ATC_Sequence) is obtained by adding the ATC delta 1 (ATC_delta1) to the value ATC (ATC1) of the original ATC sequence (ATC_Sequence) (step S38).

Дельта ATC (ATC_delta) означает значение смещения, представляющее смещение от момента T1 времени ввода последнего пакета TS транспортного потока (TS1), который был считан изначально, до момента T2 времени ввода последнего пакета TS транспортного потока (TS2), который был считан вновь. Дельта ATC (ATC_delta) удовлетворяет «ATC_delta ≥ N1/TS_recording_rate» («дельта ATC ≥ N1/(скорость записи TS)», где N1 - итоговая сумма пакетов TS, следующих за последним пакетом PES видео из TS1.Delta ATC (ATC_delta) means an offset value representing the offset from the time T1 of the input of the last packet TS of the transport stream (TS1), which was read initially, until the time T2 of the input of the last packet TS of the transport stream (TS2), which was read again. The ATC delta (ATC_delta) satisfies "ATC_delta ≥ N1 / TS_recording_rate" ("ATC delta ≥ N1 / (TS write speed)", where N1 is the total sum of TS packets following the last PES packet of video from TS1.

В дополнение, когда предыдущий элемент воспроизведения, приведенный выше, присутствует, последовательность STC (STC_Sequence) переключается. Для переключения последовательности STC (STC_Sequence) рассчитывается дельта 2 STC (STC_delta2) (этап S39), и значение STC (STC2) новой последовательности STC (STC_Sequence) получается добавлением дельты 2 STC (STC_delta2) к значению STC первоначальной последовательности STC (STC_Sequence) (этап S40).In addition, when the previous playitem above is present, the STC sequence (STC_Sequence) is switched. To switch the STC sequence (STC_Sequence), the STC delta 2 (STC_delta2) is calculated (step S39), and the STC (STC2) value of the new STC sequence (STC_Sequence) is obtained by adding the STC delta 2 (STC_delta2) to the STC value of the initial STC sequence (STC_Sequence) (step S40).

Допустим, что временем начала отображения кинокадра, отображенного в заключение в предшествующей последовательности STC (STC_Sequence) является PTS1(1-е окончание), периодом времени отображения кинокадра является TPP, а временем начала кинокадра, отображаемого в начале в следующей последовательности STC (STC_Sequence) является PTS2 (2-е начало). Здесь для CC=5, поскольку необходимо согласовывать время PTS1(1-е окончание)+TPP с временем PTS2 (2-е начало), дельта 2 STC (STC_delta2) может рассчитываться по следующему равенству:Assume that the start time for displaying the motion picture displayed finally in the previous STC (STC_Sequence) sequence is PTS1 (1st termination), the time period for displaying the motion picture is TPP, and the start time of the motion picture displayed at the beginning in the next STC (STC_Sequence) sequence is PTS2 (2nd beginning). Here for CC = 5, since it is necessary to coordinate the time PTS1 (1st end) + TPP with the time PTS2 (2nd beginning), delta 2 STC (STC_delta2) can be calculated using the following equation:

STC_delta2=PTS1(1-е окончание)+TPP-PTS2(2-е начало).STC_delta2 = PTS1 (1st ending) + TPP-PTS2 (2nd ending).

После того как аудиодекодер 9 инструктируется для подавления перекрытия аудио, декодер инструктируется для осуществления воспроизведения с момента времени начала элемента воспроизведения (PlayItem_In_Time) до момента времени окончания элемента воспроизведения (PlayItem_Out_Time) (этап S41).After the audio decoder 9 is instructed to suppress audio overlap, the decoder is instructed to perform reproduction from the start time of the playitem (PlayItem_In_Time) to the end time of the playitem (PlayItem_Out_Time) (step S41).

Контроллер 22 выполняет последовательность операций переключения STC, как описано выше, и эта последовательность операций выполняется в устройстве воспроизведения с общепринятой реализацией, когда декодер находится в состоянии работы без внешней синхронизации. Состояние без внешней синхронизации означает состояние, где декодер не является выполняющим синхронное управление. Впоследствии, когда STC возвращается к условию, где может быть установлена временная ось STC, декодер выполняет переход из состояния без внешней синхронизации в синхронное управление с STC. С другой стороны, когда текущий элемент воспроизведения оценен не находящимся в состоянии CC=5 на этапе S36 (этап S36: Нет), выполняется обработка по CC=1 и CC=6.The controller 22 performs the STC switching sequence of operations, as described above, and this sequence of operations is performed in the playback device with the conventional implementation, when the decoder is in a state of operation without external synchronization. A state without external synchronization means a state where the decoder is not performing synchronous control. Subsequently, when the STC returns to a condition where the time axis of the STC can be set, the decoder makes a transition from the state without external synchronization to synchronous control with the STC. On the other hand, when the current playitem is judged not to be in the state CC = 5 in step S36 (step S36: No), the processing of CC = 1 and CC = 6 is performed.

Таким образом, согласно настоящему варианту осуществления передаваемый объем, названный окном, ограничен до 48 Мбит/с или менее. Поэтому, если пакеты TS с размером в 96 Mбит × 0,5 секунд считываются в декодер заранее, буфер декодера не будет вызывать отрицательного переполнения или переполнения, даже когда передаваемый объем локально достигает 96 Мбит в пределах периода в 1 секунду. Поскольку объемом данных является «96 Мбит × 0,5 секунды» или менее в любом периоде времени в цифровом потоке, а пакеты TS могут подаваться без отрицательного переполнения или переполнения, потеря видео и аудио может быть предотвращена. Это устраняет риск, что одновременное считывание для реализации инфраструктуры сверхуплотнения оказывает влияние на качество цифрового потока.Thus, according to the present embodiment, the transmitted volume, called the window, is limited to 48 Mbps or less. Therefore, if TS packets with a size of 96 Mbit × 0.5 seconds are read into the decoder in advance, the decoder buffer will not cause negative overflow or overflow even when the transmitted volume locally reaches 96 Mbit within a period of 1 second. Since the data volume is “96 Mbps × 0.5 second” or less in any time period in the digital stream, and TS packets can be delivered without negative overflow or overflow, the loss of video and audio can be prevented. This eliminates the risk that simultaneous reads to implement overcompression infrastructure will affect the quality of the digital stream.

В дополнение, если момент времени начала (In_Time) элемента воспроизведения и момент времени окончания (Out_Time) элемента вспомогательного воспроизведения совпадают друг с другом, а состоянием соединения элементов воспроизведения является CC=5, состоянием соединения элемента вспомогательного воспроизведения становится SP_CC=5. Поэтому, когда элемент воспроизведения переключается, переключение с элемента воспроизведения на другой элемент воспроизведения и переключение с элемента вспомогательного воспроизведения на другой элемент вспомогательного воспроизведения могут выполняться одновременно, без перевода блоков демультиплексирования в исходное состояние. Таким образом, несмотря на то что временные оси STC, на которые опираются блоки демультиплексирования, созданы, чтобы синхронизировать друг друга, последовательность операций воспроизведения на основании информации списка воспроизведения может продолжаться.In addition, if the start time (In_Time) of the playitem and the end time (Out_Time) of the auxiliary playitem coincide with each other, and the connection state of the playitems is CC = 5, the connection state of the auxiliary playitem becomes SP_CC = 5. Therefore, when the playitem switches, switching from the playitem to another playitem and switch from the auxiliary playitem to another auxiliary playitem can be performed simultaneously, without resetting the demultiplexing units. Thus, although the time axes of the STCs on which the demultiplexing units are based are designed to synchronize each other, the sequence of playback operations based on the information of the playlist can continue.

Вариант 2 осуществленияOption 2 implementation

В настоящем варианте осуществления подробно описано изготовление BD-ROM по предыдущему варианту осуществления. BD-ROM по предыдущему варианту осуществления может быть изготовлен выполнением один за другим следующих последовательностей операций.In the present embodiment, the manufacture of the BD-ROM according to the previous embodiment is described in detail. The BD-ROM of the previous embodiment may be made by performing one after another of the following sequences of operations.

<Последовательность операций записи BD-ROM><BD-ROM Writing Procedure>

Сначала планируется общая структура, с которой воспроизводится BD-ROM (последовательность операций планирования), создаются материалы, такие как записи движущихся изображений и аудиозаписи (последовательность операций получения материалов), и информация конфигурации тома создается на основании общей структуры, созданной в последовательности операций планирования (последовательность операций постановки сценария).First, a general structure is planned with which the BD-ROM (planning sequence of operations) is reproduced, materials such as motion picture recordings and audio recordings (sequence of operations for obtaining materials) are created, and volume configuration information is created based on the general structure created in the planning sequence ( script statement).

Информация конфигурации тома является информацией, указывающей формат прикладного уровня на оптическом диске с использованием абстрактного описания.Volume configuration information is information indicating an application layer format on an optical disc using an abstract description.

Впоследствии каждые из видеоматериалов, аудиоматериалов, материалов субтитров и материалов меню кодируются, чтобы, тем самым, создать элементарные потоки (последовательность операций кодирования материалов). Затем многочисленные элементарные потоки мультиплексируются (последовательность операций мультиплексирования).Subsequently, each of the video materials, audio materials, subtitle materials, and menu materials are encoded to thereby create elementary streams (a sequence of operations for encoding materials). Then, multiple elementary streams are multiplexed (multiplexing process flow).

Затем выполняется операция для подгонки мультиплексированных потоков и информации конфигурации тома под формат прикладного уровня BD-ROM, и получаются полные данные (обычно называемые «данными тома»), которые должны записываться в область тома BD-ROM (последовательность операций форматирования).Then, an operation is performed to adjust the multiplexed streams and volume configuration information to the BD-ROM application layer format, and complete data (usually called “volume data”) is obtained, which must be written to the BD-ROM volume region (formatting flow).

Экземпляры структуры классов, описанные на языке программирования, являются форматом прикладного уровня носителя записи согласно настоящему изобретению. Информация о клипах, информация списка воспроизведения и тому подобное могут создаваться описанием экземпляров структуры классов на основании синтаксиса, заданного в стандарте BD-ROM. В этом случае данные в табличном формате могут быть определены с использованием операторов «for» языка программирования, а данные, требуемые при определенных условиях, могут определяться с использованием операторов «if».The instances of the class structures described in the programming language are the application layer format of the recording medium according to the present invention. Clip information, playlist information, and the like can be created by describing instances of the class structure based on the syntax specified in the BD-ROM standard. In this case, the data in a table format can be determined using the "for" statements of the programming language, and the data required under certain conditions can be determined using the "if" statements.

Когда данные тома получены после такой последовательности операций подгонки, данные тома воспроизводятся, чтобы понять, является ли правильным результат последовательности операций постановки сценария (последовательность операций эмуляции). В последовательности операций эмуляции желательно проводить эмуляцию состояния буфера модели проигрывателя BD-ROM.When the volume data is obtained after such a sequence of fitting operations, the volume data is reproduced to understand whether the result of the scenario setting sequence (emulation sequence) is correct. In the emulation process, it is desirable to emulate the buffer state of the BD-ROM player model.

В заключение, выполняется последовательность операций штамповки. При этой последовательности операций штамповки, изображения тома преобразуются в физические последовательности данных, и нарезка первого оригинала диска проводится посредством использования физических последовательностей данных для создания первого оригинала диска. Затем BD-ROM изготавливаются из первого оригинала, созданного устройством штамповки. Изготовление состоит из различных последовательностей операций, включающих в себя, главным образом, формование подложки, покрытие отражающей пленкой, покрытие защитной пленкой, ламинирование и печать этикетки.In conclusion, a stamping sequence is performed. With this punching sequence, the images of the volume are converted into physical data sequences, and the cutting of the first original disk is done by using physical data sequences to create the first original disk. Then the BD-ROMs are made from the first original created by the stamping device. The manufacture consists of various sequences of operations, including mainly forming the substrate, coating with a reflective film, coating with a protective film, laminating and printing labels.

Завершением этих последовательностей операций может создаваться носитель записи (BD-ROM), описанный в варианте осуществления, приведенном выше.By completing these workflows, a recording medium (BD-ROM) described in the embodiment above can be created.

<Последовательность операций создания дополнительного контента><Sequence of operations for creating additional content>

Когда кинокартина состоит из содержимого BD-ROM и дополнительного содержимого, выполняются вышеупомянутые с последовательности операций планирования до последовательности операций форматирования. Затем получаются AV-клипы, информация о клипах и информация списка воспроизведения, составляющие данные тома. Те, которые будут поставляться посредством BD-ROM, удаляются из полученных AV-клипов, информации о клипах и информации списка воспроизведения, а оставшаяся информация собирается в один файл в качестве дополнительного контента посредством программы архиватора или тому подобного. Когда такой дополнительный контент получен после этих последовательностей операций, дополнительный контент поставляется на веб-сервер и отправляется в устройства воспроизведения по запросу.When the motion picture consists of the contents of the BD-ROM and the additional contents, the aforementioned from the flow of scheduling to the flow of formatting are performed. Then, AV clips, clip information, and playlist information constituting the volume data are obtained. Those that will be delivered via BD-ROM are deleted from the received AV clips, clip information and playlist information, and the remaining information is collected into a single file as additional content by means of an archiver program or the like. When such additional content is obtained after these sequences of operations, the additional content is delivered to a web server and sent to playback devices upon request.

Проверка, описанная в вышеприведенном варианте осуществления, проводится, когда AV-клипы, информация о клипах и информация списка воспроизведения скомплектованы и элементарные потоки, которые должны воспроизводиться, определены таблицей STN (STN_table) в информации списка воспроизведения - то есть в последовательности операций форматирования. Последующее разъясняет систему авторской разработки, которая создает такой прикладной формат.The verification described in the above embodiment is performed when the AV clips, clip information and playlist information are completed and the elementary streams to be played are determined by the STN table (STN_table) in the playlist information — that is, in the formatting flowchart. The following clarifies the authoring system that creates such an application format.

<Система авторской разработки><Authoring System>

Фиг.33 показывает внутреннюю структуру системы авторской разработки по варианту 2 осуществления. Как показано на фигуре, система авторской разработки состоит из: устройства 51 ввода; устройства 52 кодирования; серверного устройства 53; запоминающего устройства 54 материалов; запоминающего устройства 55 информации конфигурации ED; клиентских устройств 55-58; мультиплексора 60; преобразователя 61 сценария ED; форматера 62 и модуля 63 проверки.Fig. 33 shows the internal structure of the authoring system of Embodiment 2. As shown in the figure, the authoring system consists of: input device 51; encoding device 52; server device 53; a storage device 54 materials; a storage device 55 of ED configuration information; client devices 55-58; multiplexer 60; an ED script converter 61; formatter 62 and verification module 63.

В устройстве 51 ввода устанавливается видеокассета, на которой записаны изображения HD и изображения SD, а затем устройство 51 ввода воспроизводит видеокассету и выводит сигналы воспроизведения в устройство 52 кодирования.A video cassette is installed in the input device 51, on which HD images and SD images are recorded, and then the input device 51 reproduces the video cassette and outputs playback signals to the encoding device 52.

Устройство 52 кодирования кодирует сигналы воспроизведения, выведенные из устройства 51 ввода, чтобы, тем самым, получить элементарные потоки, такие как видеопотоки и аудиопотоки. Элементарные потоки, полученные таким путем, выводятся на серверное устройство 53 через LAN и записываются в запоминающее устройство 54 материалов в серверном устройстве 53.The encoding device 52 encodes the playback signals output from the input device 51 to thereby obtain elementary streams such as video streams and audio streams. Elementary streams obtained in this way are output to the server device 53 via the LAN and recorded in the storage device 54 of the materials in the server device 53.

Серверное устройство 53 состоит из двух приводных устройств, запоминающего устройства 54 материалов и запоминающего устройства 55 информации конфигурации BD.The server device 53 consists of two drive devices, a material storage device 54, and a BD configuration information storage device 55.

Запоминающее устройство 54 материалов является встроенным дисковым устройством серверного устройства 53 и последовательно сохраняет элементарные потоки, полученные посредством операций кодирования устройством 52 кодирования. Запоминающее устройство 54 материалов содержит два каталога, каталог потоков HD и каталог потоков SD. Элементарные потоки, полученные кодированием изображений HD, записываются в каталог потоков HD.The material storage device 54 is an integrated disk device of the server device 53 and sequentially stores the elementary streams obtained through encoding operations by the encoding device 52. The memory device 54 contains two directories, a directory of HD streams and a directory of SD streams. Elementary streams obtained by encoding HD images are recorded in the HD stream catalog.

Запоминающее устройство 55 информации конфигурации ED является приводным устройством, в котором сохраняется информация конфигурации тома BD.The ED configuration information storage device 55 is a drive device in which configuration information of a volume BD is stored.

Мультиплексор 60 считывает из числа элементарных потоков, сохраненных в каталоге потоков HD и каталоге потоков SD в запоминающем устройстве 54 материалов, таковые, заданные в информации конфигурации тома BD, а затем мультиплексирует считанные элементарные потоки согласно информации конфигурации тома HD, чтобы тем самым получить мультиплексированный поток, то есть AV-клип.A multiplexer 60 reads from among the elementary streams stored in the HD stream directory and the SD stream directory in the material storage 54 those specified in the configuration information of the BD volume, and then multiplexes the read elementary streams according to the configuration information of the HD volume to thereby obtain a multiplexed stream , i.e. an AV clip.

Преобразователь 61 сценария BD получает сценарий BD преобразованием информации конфигурации тома BD, сохраненной в запоминающем устройстве 55 информации конфигурации BD, в прикладной формат BD-ROM.The BD script converter 61 obtains the BD script by converting the BD volume configuration information stored in the BD configuration information memory 55 to the application BD-ROM format.

Форматер 62 адаптирует клип, полученный мультиплексором 60, и сценарий BD, полученный преобразователем 61 сценария BD, в формат прикладного уровня на BD-ROM. Посредством этого первый оригинал BD-ROM и контенты для загрузки, которые должны сохраняться на локальном запоминающем устройстве, могут быть получены из адаптированного сценария BD.The formatter 62 adapts the clip received by the multiplexer 60 and the BD script received by the BD script converter 61 to the application layer format on the BD-ROM. By this, the first original BD-ROM and download contents to be stored on the local storage device can be obtained from the adapted BD script.

Модуль 63 проверки оценивает, обращаясь к таблице STN (STN_table) в информации списка воспроизведения, сформированной преобразователем 61 сценария, удовлетворяют ли первичные TS для BD-ROM и вторичные TS для локального запоминающего устройства, полученные мультиплексором 60, ограничениям для реализации приложения сверхуплотнения.Verification unit 63 evaluates, by referring to the STN table (STN_table) in the playlist information generated by the script converter 61, whether the primary TSs for the BD-ROM and the secondary local memory TSs obtained by the multiplexer 60 satisfy the constraints for implementing the supercompression application.

В этом заключается внутренняя структура системы авторской разработки. Последующее поясняет реализацию модуля 63 проверки системы авторской разработки.This is the internal structure of the authoring system. The following explains the implementation of the authoring system verification module 63.

<Процедура обработки для реализации модуля 63 проверки><Processing Procedure for Implementing Verification Module 63>

Модуль 63 проверки может быть реализован в системе авторской разработки посредством создания программы, которая побуждает ЦП выполнять процедуры обработки по блок-схеме последовательности операций способа, показанной на фиг.34 и 35, записи программы в ПЗУ и отправки ее в ЦП.Verification module 63 can be implemented in the authoring system by creating a program that prompts the CPU to perform processing according to the flowchart of the method shown in FIGS. 34 and 35, writing the program to ROM and sending it to the CPU.

Фиг.34 - блок-схема последовательности операций способа, показывающая процедуру проверки над первичными TS и вторичными TS. Блок-схема последовательности операций способа показывает, что ATS первого исходного пакета в последовательности исходных пакетов устанавливается в качестве момента времени начала (In_Time) текущего окна на этапе S1, и последовательности операций по этапам с S2 по S7 повторяются. Циклическая структура повторяет последующие этапы с S2 по S5 до тех пор, пока оценкой на этапе S6 не становится Да: ATS, появляющийся спустя 1 секунду от момента времени начала (In_Time) текущего окна, установлен в качестве момента времени окончания (Out_Time) текущего окна (этап S2); подсчитываются пакеты TS, присутствующие между моментом времени начала (In_Time) и моментом времени окончания (Out_Time) текущего окна (этап S3); итоговая сумма битов текущего окна рассчитывается с момента времени начала (In_Time) (этап S4); и производится оценка, является ли битовым значением 48 Мбит или менее (этап 55). Этапом S6 является оценка, достиг ли момент времени окончания (Out_Time) текущего окна последнего исходного пакета на временной оси ATC. Ели этап S6 принимает состояние Нет, следующий ATS в последовательности исходных пакетов устанавливается в момент времени начала (In_Time) текущего окна (этап S7), и этапы S2-S6 повторяются. Если с любым окном этап S5 принимает состояние Нет, определяется, что есть нарушение стандартизации BD-ROM (этап 9). Когда этап S5 принимает состояние Да для всех окон, а затем этап S6 принимает состояние Да, определяется, что первичные TS и вторичные TS соблюдают стандарт BD-ROM (этап S8).Fig. 34 is a flowchart showing a verification procedure for primary TS and secondary TS. The flowchart shows that the ATS of the first source packet in the source packet sequence is set as the start time (In_Time) of the current window in step S1, and the process steps in steps S2 to S7 are repeated. The cyclic structure repeats the subsequent steps S2 to S5 until the assessment in step S6 becomes Yes: the ATS that appears 1 second after the start time (In_Time) of the current window is set as the Out_Time of the current window ( step S2); the TS packets present between the start time (In_Time) and the end time (Out_Time) of the current window are counted (step S3); the total amount of bits of the current window is calculated from the start time (In_Time) (step S4); and an assessment is made whether the bit value is 48 Mbps or less (step 55). Step S6 is an evaluation of whether the Out_Time has reached the current window of the last source packet on the ATC time axis. If step S6 is No, the next ATS in the source packet sequence is set at the start time (In_Time) of the current window (step S7), and steps S2-S6 are repeated. If, with any window, step S5 becomes No, it is determined that there is a violation of the standardization of the BD-ROM (step 9). When step S5 accepts Yes for all windows, and then step S6 accepts Yes, it is determined that the primary TS and secondary TS comply with the BD-ROM standard (step S8).

Поскольку первичные TS и вторичные TS были подвергнуты последовательности операций проверки, вышеупомянутые ограничения удовлетворяются всегда, даже когда первичные TS и вторичные TS подаются из BD-ROM и локального запоминающего устройства соответственно.Since the primary TS and secondary TS were subjected to a verification process, the above limitations are always satisfied even when the primary TS and secondary TS are supplied from the BD-ROM and local storage, respectively.

В отношении видеопотоков, аудиопотоков, потоков PG и потоков IG, если есть многочисленные элементарные потоки одного и того же типа, желательно проводить проверку согласно процедуре, показанной на фиг.35. При процедуре проверки по фиг.35 этапы S3 и S4 по фиг.34 замещаются этапами S81-S83.With respect to video streams, audio streams, PG streams and IG streams, if there are multiple elementary streams of the same type, it is desirable to carry out a check according to the procedure shown in FIG. 35. In the verification procedure of FIG. 35, steps S3 and S4 of FIG. 34 are replaced by steps S81-S83.

Этапы S81-S83 состоят в том, что: касательно TS, принадлежащих текущему окну, из числа пакетов TS, составляющих элементарные потоки, которым, в таблице STN (STN_table), предоставлена возможность воспроизводиться, битовая скорость рассчитывается для каждого элементарного потока каждый раз, когда определяется текущее окно (этап S81); для каждого типа потоков - то есть многочисленных видеопотоков, многочисленных аудиопотоков, многочисленных потоков PG и многочисленных потоков IG, выбираются имеющие наивысшую рассчитанную битовую скорость (этап S82); наивысшая битовая скорость видеопотока, наивысшая битовая скорость аудиопотока, наивысшая битовая скорость потока PG и наивысшая битовая скорость потока IG суммируются (этап S83); и производится оценка, является ли итоговой суммой 48 Мбит или менее (этап S5).Steps S81-S83 are that: regarding the TS belonging to the current window, from the number of TS packets constituting the elementary streams, which, in the STN table (STN_table), are allowed to play, the bit rate is calculated for each elementary stream every time the current window is determined (step S81); for each type of stream — that is, multiple video streams, multiple audio streams, multiple PG streams, and multiple IG streams — those having the highest calculated bit rate are selected (step S82); the highest bit rate of the video stream, the highest bit rate of the audio stream, the highest bit rate of the PG stream and the highest bit rate of the IG stream are summed (step S83); and an assessment is made whether the total amount is 48 Mbps or less (step S5).

В приложении сверхуплотнения элементарный поток всегда выбирается единственным и исключительным образом из числа одного и того же типа элементарных потоков, а потому более приемлемо, чтобы проверка проводилась в вышеупомянутой процедуре.In a super-densification application, an elementary flow is always selected solely and exclusively from among the same type of elementary flows, and therefore it is more acceptable that the verification be carried out in the above procedure.

Касательно проверки, является рациональным проверять положения с локально высокими битовыми скоростями, то есть битовые значения положений, в которых имеют место локальные пики. Положения, где имеют место локальные пики, являются следующими.Regarding verification, it is rational to check locations with locally high bit rates, that is, bit values of positions at which local peaks occur. The positions where local peaks occur are as follows.

(1) начало пакета TS, указанное моментом времени начала (In_Time) окна;(1) the start of the TS packet indicated by the start time (In_Time) of the window;

(2) окончание пакета TS, указанное моментом времени начала (In_Time) окна;(2) the end of the TS packet indicated by the start time (In_Time) of the window;

(3) начало пакета TS, указанное моментом времени окончания (Out_Time) окна, и(3) the start of the TS packet indicated by the window's end time (Out_Time), and

(4) окончание пакета TS, указанное моментом времени окончания (Out_Time) окна. Последовательность операций проверки при авторской разработке может дополнительно упрощаться специальным сосредоточением на количествах битов этих положений.(4) the end of the TS packet indicated by the end time (Out_Time) of the window. The sequence of verification operations during authoring can be further simplified by a special focus on the number of bits of these positions.

Таким образом, согласно настоящему варианту осуществления, когда создана таблица STN (STN_table), которая предоставляет возможность воспроизведения вторичных TS, может проверяться заранее, когда выполняется авторская разработка, может ли вызываться отрицательное переполнение или переполнение в процессе воспроизведения, на основании таблицы STN (STN_table).Thus, according to the present embodiment, when an STN table (STN_table) is created that allows secondary TSs to be reproduced, it can be checked beforehand when authoring is being performed whether a negative overflow or overflow can be caused during playback based on the STN table (STN_table) .

Вариант 3 осуществленияOption 3 implementation

В настоящем изобретении новый тип CC=6 предусмотрен в отношении соединения между элементами воспроизведения и между элементами вспомогательного воспроизведения.In the present invention, a new type of CC = 6 is provided for a connection between playitems and between sub playitems.

CC=6 задает состояние соединения между многочисленными частями информации об элементах воспроизведения, составляющей информацию прогрессивного списка воспроизведения. Информация прогрессивного списка воспроизведения является информацией списка воспроизведения, используемой для задания, в качестве одного пути воспроизведения, многочисленных AV-клипов для потокового воспроизведения.CC = 6 defines the state of the connection between the plural pieces of playitem information constituting the progressive playlist information. The progressive playlist information is the playlist information used to specify, as one playback path, multiple AV clips for streaming playback.

<Информация прогрессивного списка воспроизведения><Progressive playlist information>

Информация прогрессивного списка воспроизведения обладает преимуществом становления меньшим размера кэша или наличием способности начинать воспроизведение без ожидания всех файлов, которые должны быть загружены, посредством деления вторичных TS для загрузки/потоковой передачи на частичные файлы.Progressive playlist information has the advantage of becoming smaller in cache size or having the ability to start playback without waiting for all the files to be downloaded by dividing the secondary TS for download / streaming into partial files.

Поскольку контенты, предусматривающие потоковую передачу, заданы многими короткими AV-клипами, информация прогрессивного списка воспроизведения состоит из многих частей информации списка воспроизведения, каждая из которых соответствует разному одному из многочисленных AV-клипов. С другой стороны, AV-клипы, поделенные на небольшие блоки, были поделены для потоковой передачи, а потому, разрывы в STC и ATC отсутствуют. Соответственно, такое состояние соединения AV-клипов должно быть задано как отличное от CC=5 состояние. Этот тип состояния соединения задан как CC=6.Since streaming content is defined by many short AV clips, progressive playlist information consists of many pieces of playlist information, each of which corresponds to a different one of the multiple AV clips. On the other hand, AV clips, divided into small blocks, were divided for streaming, and therefore, there are no gaps in the STC and ATC. Accordingly, such a connection state of the AV clips should be set as different from CC = 5. This type of connection state is defined as CC = 6.

<Условия, которые должны удовлетворяться, когда CC=6><Conditions to be met when CC = 6>

Когда CC=6, TS1 и TS2, заданные двумя элементами воспроизведения, и TS1 и TS2, заданные двумя элементами вспомогательного воспроизведения, должны удовлетворять следующим условиям.When CC = 6, TS1 and TS2 defined by two playitems and TS1 and TS2 specified by two auxiliary playitems must satisfy the following conditions.

1) Видеопоток из TS2 должен начинаться с GOP (группы изображений или кадров).1) The video stream from TS2 must begin with a GOP (group of images or frames).

2) Нет промежутка, в последовательности блоков представления аудио, в точке соединения между аудиопотоком из TS2 и аудиопотоком из TS1, имеющим такой же PID, как у аудиопотока из TS2.2) There is no gap, in the sequence of audio presentation blocks, at the connection point between the audio stream from TS2 and the audio stream from TS1 having the same PID as the audio stream from TS2.

Аудиопоток из TS1 может заканчиваться как неполный аудиопоток. Затем аудиопоток из TS2, имеющий такой же PID, как TS1, может начинаться с неполного блока представления аудио. Воспроизведением этих TS1 и TS2 на основании многочисленных элементов воспроизведения и многочисленных элементов вспомогательного воспроизведения, один полный блок представления аудио может быть получен из двух блоков представления аудио.The audio stream from TS1 may end up as an incomplete audio stream. Then, the audio stream from TS2 having the same PID as TS1 may begin with an incomplete audio presentation block. By reproducing these TS1 and TS2 based on the plurality of playitems and the plurality of auxiliary playitems, one complete audio presentation unit can be obtained from two audio presentation units.

В случае CC=6 поток фактически является непрерывным. Поэтому все элементарные потоки соединяются безразрывно в отличие от случая CC=5, где видео соединяется только безразрывно, тогда как аудио соединяется разрывным образом или устанавливается для подавления.In the case of CC = 6, the flow is actually continuous. Therefore, all elementary streams are connected seamlessly, in contrast to the case of CC = 5, where the video is connected only seamlessly, while the audio is connected in a discontinuous manner or set to suppress.

Таким образом, CC=6 означает разделительную границу, создаваемую, когда логически непрерывный поток делится на многочисленные части согласно назначению потоковой передачи. Отметим, что, поскольку поток, который должен быть записан на BD-ROM, должен состоять из 32 исходных пакетов, файлу одного потока, формирующему один элемент вспомогательного воспроизведения, необходимо быть значениями, кратными 6 кбайтам.Thus, CC = 6 means the dividing boundary created when a logically continuous stream is divided into multiple parts according to the purpose of the streaming. Note that, since the stream to be recorded on the BD-ROM must consist of 32 source packets, the file of one stream forming one element of auxiliary playback must be values that are multiples of 6 kbytes.

<Подробности о CC=6><CC Details = 6>

Фиг.36 показывает подробное разъяснение относительно CC=6. Уровень 1 показывает файл (20000.m2ts), содержащий одиночный непрерывный временной ряд ATC/STC, а способ кодирования не меняется. Уровень 2 показывает три файла (20001.m2ts, 20002.m2t и 20003.m2ts), хранящие в них три потока. Эти три файла хранят в них три первичных TS, которые были получены делением одиночного потока уровня 1 на блоки из выровненных блоков (6 кбайт).Fig. 36 shows a detailed explanation of CC = 6. Level 1 shows a file (20000.m2ts) containing a single continuous ATC / STC time series, and the encoding method does not change. Level 2 shows three files (20001.m2ts, 20002.m2t and 20003.m2ts) that store three streams in them. These three files store three primary TSs in them, which were obtained by dividing a single level 1 stream into blocks of aligned blocks (6 kB).

Фиг.37 показывает взаимосвязь между элементами воспроизведения и элементами вспомогательного воспроизведения. Уровень 1 показывает три элемента воспроизведения (информацию #1 об элементе воспроизведения, информацию #2 об элементе воспроизведения и информацию #3 об элементе воспроизведения) в информации списка воспроизведения. Эти три элемента воспроизведения задают первичный TS, а соединение между информацией #1 и #2 об элементе воспроизведения установлено в CC=1, тогда как соединение между информацией #2 и #3 об элементе воспроизведения установлено в CC=5. Уровень 2 показывает три элемента вспомогательного воспроизведения (элемент #1 вспомогательного воспроизведения, элемент #2 вспомогательного воспроизведения и элемент #3 вспомогательного воспроизведения) в информации списка воспроизведения. Эти три элемента вспомогательного воспроизведения задают вторичный TS, а соединение между элементами #1 и #2 вспомогательного воспроизведения установлено в CC=1, тогда как соединение между элементами #2 и #3 вспомогательного воспроизведения установлено в CC=5. Уровень 3 показывает девять элементов вспомогательного воспроизведения (элемент #1 вспомогательного воспроизведения, элемент #2 вспомогательного воспроизведения, с элемента #3 вспомогательного воспроизведения по элемент #9 вспомогательного воспроизведения) в информации прогрессивного списка воспроизведения. Эти девять элементов вспомогательного воспроизведения задают вторичный TS. Здесь соединение между элементами #3 и #4 вспомогательного воспроизведения установлено в CC=1, соединение между элементами #6 и #7 вспомогательного воспроизведения установлено в CC=5, а оставшиеся соединения установлены в CC=6. Элементы вспомогательного воспроизведения в прогрессивном списке воспроизведения обычно соединены при CC=6; однако, когда элементы воспроизведения соединены при CC=1 и CC=5, элементы вспомогательного воспроизведения также соединяются с удовлетворением условия CC=1 и CC=5 соответственно, подобно элементам воспроизведения.Fig. 37 shows the relationship between playitems and sub playitems. Level 1 shows three playitems (information # 1 about a playitem, information # 2 about a playitem and information # 3 about a playitem) in the playlist information. These three playitems define the primary TS, and the connection between the playitem information # 1 and # 2 is set to CC = 1, while the connection between the playitem information # 2 and # 3 is set to CC = 5. Level 2 shows three sub-play items (sub-play item # 1, sub-play item # 2 and sub-play item # 3) in the playlist information. These three sub-play elements define the secondary TS, and the connection between the sub-play items # 1 and # 2 is set to CC = 1, while the connection between the sub-play items # 2 and # 3 is set to CC = 5. Level 3 shows nine sub-play items (sub-play item # 1, sub-play item # 2, from sub-play item # 3 to sub-play item # 9) in the progressive playlist information. These nine sub-play elements define the secondary TS. Here, the connection between the sub-play items # 3 and # 4 is set to CC = 1, the connection between the sub-play items # 6 and # 7 is set to CC = 5, and the remaining connections are set to CC = 6. Auxiliary play items in a progressive play list are usually connected at CC = 6; however, when the playitems are connected at CC = 1 and CC = 5, the auxiliary playitems are also connected to satisfy the conditions CC = 1 and CC = 5, respectively, like the playitem.

Таким образом, настоящий вариант осуществления вводит новое состояние соединения CC=6 для элементов воспроизведения и элементов вспомогательного воспроизведения, в силу этого осуществляя последовательность операций деления AV-клипов, составляющих информацию прогрессивного списка воспроизведения, на небольшие секции и поставляя их посредством потоковой передачи.Thus, the present embodiment introduces a new CC = 6 connection state for playitems and sub playitems, thereby performing a process of dividing the AV clips constituting the progressive playlist information into small sections and delivering them via streaming.

Вариант 4 осуществленияOption 4 implementation

В варианте 1 осуществления пояснено, каким образом следует ограничивать количество битов для каждого окна; настоящий вариант осуществления представляет, каким образом выполнять мультиплексирование, чтобы удовлетворять таким ограничениям.Embodiment 1 explains how to limit the number of bits for each window; the present embodiment provides how to perform multiplexing in order to satisfy such constraints.

<Мультиплексирование видео и аудио><Multiplexing video and audio>

Фиг.38 схематично показывает, в случае где аудио, составляющее первичный TS, замещается аудио, составляющим вторичный TS, каким образом многочисленные пакеты TS, составляющие первичный TS, и многочисленные пакеты TS, составляющие вторичный TS, мультиплексируются вместе.Fig. 38 schematically shows, in the case where the audio constituting the primary TS is replaced by the audio constituting the secondary TS, how the plural TS packets constituting the primary TS and the plural TS packets constituting the secondary TS are multiplexed together.

Фиг.38 схематично показывает способ, которым совместно мультиплексируются многочисленные пакеты TS, представленные на временной оси ATC. Уровень 1 показывает первичный TS. Первичный TS состоит из пакетов TS, хранящих в них V, A1 и A2 (один набор видео и два набора аудио). Эти пакеты TS получены совместным мультиплексированием этих трех элементарных потоков двух типов.Fig. 38 schematically shows a method by which multiple TS packets represented on an ATC time axis are multiplexed together. Level 1 shows the primary TS. The primary TS consists of TS packets storing V, A1 and A2 in them (one set of video and two sets of audio). These TS packets are obtained by jointly multiplexing these three elementary streams of two types.

Уровень 2 показывает вторичный TS. Вторичный TS состоит из пакетов TS, хранящих в них два набора аудио A3 и A4. Период p3 времени, в течение которого эти пакеты TS вторичного TS мультиплексируются, на временной оси ATC, указывающей временные характеристики ввода в декодер, составлен из периода p1 времени, в течение которого мультиплексируются аудиопакеты первичного TS, и периода p2 времени, в течение которого не передаются пакеты TS, образующие первичный TS.Level 2 shows the secondary TS. The secondary TS consists of TS packets storing in them two sets of audio A3 and A4. The time period p3 during which these secondary TS packets are multiplexed, on the time axis ATC indicating the time characteristics of input to the decoder, is composed of the time period p1 during which the audio packets of the primary TS are multiplexed and the time period p2 during which they are not transmitted TS packets forming the primary TS.

Мультиплексированием потоков таким способом, может быть обеспечено, что итоговая сумма битовой скорости элементарных потоков, которые должны декодироваться, не превышает допустимую максимальную битовую скорость первичного TS (48 Мбит/с), безразлично какой элементарный поток выбран для каждого типа из элементарных потоков. Пример, показанный на фиг.38, является простейшим случаем, в котором вторичный TS включает в себя только аудио.By multiplexing the streams in this way, it can be ensured that the total bit rate of the elementary streams to be decoded does not exceed the allowable maximum bit rate of the primary TS (48 Mbit / s), no matter which elementary stream is selected for each type of elementary streams. The example shown in FIG. 38 is the simplest case in which the secondary TS includes only audio.

<Мультиплексирование потоков видео, аудио, PG и IG><Multiplexing video, audio, PG and IG streams>

Фиг.39 схематично показывает, в случае где субтитры (поток PG) и меню (поток IG) также замещаются в дополнение к аудио, способ, которым совместно мультиплексируются многочисленные пакеты TS, составляющие первичный TS, и многочисленные пакеты TS, составляющие вторичный TS.Fig. 39 schematically shows, in the case where the subtitles (PG stream) and menu (IG stream) are also replaced in addition to audio, the manner in which multiple TS packets constituting the primary TS and multiple TS packets constituting the secondary TS are multiplexed together.

На фигуре период k3 времени, в течение которого пересылаются пакеты вторичного TS, является итоговой суммой:In the figure, the period k3 of the time during which the packets of the secondary TS are forwarded is the total amount:

1) периода k1 времени, в течение которого пересылаются пакеты, чей тип является таким же, как в первичном TS, и1) the period k1 of the time during which packets are sent whose type is the same as in the primary TS, and

2) периода времени, в течение которого первичный TS не передается.2) the period of time during which the primary TS is not transmitted.

Вышеприведенные правила 1) и 2) применяются таким же образом к другим типам потоков (видео, IG, PG и подобным), хранимым во вторичном TS. Поэтому целесообразно, если для каждого потока сначала производится оценка, может ли поток мультиплексироваться во вторичный TS в течение периода времени, когда пересылается пакет, чей тип является таким же, как в первичном TS, и, когда оценка отрицательна, выполняется мультиплексирование в периоде времени, в течение которого никакой первичный TS не пересылается.The above rules 1) and 2) apply in the same way to other types of streams (video, IG, PG and the like) stored in the secondary TS. Therefore, it is advisable if, for each stream, it is first evaluated whether the stream can be multiplexed to the secondary TS during the time period when the packet is forwarded, whose type is the same as in the primary TS, and when the rating is negative, multiplexing in the time period is performed, during which no primary TS is forwarded.

<Последовательность операций мультиплексора 60><The sequence of operations of the multiplexer 60>

Последующее более точно описывает последовательность операций мультиплексора 60 по настоящему варианту осуществления.The following more accurately describes the sequence of operations of the multiplexer 60 of the present embodiment.

Чтобы реализовать мультиплексирование, описанное выше, мультиплексор 60 имитирует согласно модели декодера состояние буфера, зафиксированное, когда воспроизводится первичный TS, и находит период времени для пересылки каждого пакета первичного TS и период времени для отсутствия передачи первичного TS. После нахождения этих периодов времени мультиплексор 60 преобразует каждый пакет PES, составляющий вторичный TS, в пакеты TS, так что каждый из пакетов PES пересылается в течение периода времени, когда пересылается пакет, чей тип является таким же, как в первичном TS, или в течение периода времени, когда первичный TS не пересылается, и прикрепляет ATS к каждому пакету TS. Поскольку ATS, прикрепленный этим способом, указывает период времени, когда пересылается пакет, чей тип является таким же, как в первичном TS, или период времени, когда первичный TS не пересылается, каждый пакет PES, составляющий вторичный TS, отправляется в декодер в течение периода времени, когда пересылается пакет, чей тип является таким же, как в первичном TS, или периода времени, когда первичный TS не передается, как показано на фиг.39.In order to implement the multiplexing described above, the multiplexer 60 imitates, according to the decoder model, the buffer state fixed when the primary TS is played back, and finds a time period for sending each packet of the primary TS and a time period for no transmission of the primary TS. After finding these time periods, the multiplexer 60 converts each PES packet constituting the secondary TS into TS packets, so that each of the PES packets is sent during the time period when the packet is sent, whose type is the same as in the primary TS, or during the time period when the primary TS is not forwarded, and attaches the ATS to each TS packet. Because the ATS attached by this method indicates the period of time when a packet is sent whose type is the same as that in the primary TS, or the period of time when the primary TS is not forwarded, each PES packet constituting the secondary TS is sent to the decoder during the period the time when a packet is being forwarded whose type is the same as in the primary TS, or the time period when the primary TS is not transmitted, as shown in FIG.

<Поставка согласно DVD><Delivery according to DVD>

В случае когда элементарные потоки, поставляемые из локального запоминающего устройства, созданы не в формате транспортного потока, а в формате программного потока мультиплексор 60 преобразует пакеты PES, составляющие элементарные потоки, в пачки, и SCR (системная временная метка) прикрепляется к заголовку TS каждой пачки. SCR, прикрепленная таким способом, также указывает, подобно ATS, период времени, когда пересылается пакет, чей тип является таким же, как в первичном TS, или период времени, когда первичный TS не пересылается. Поэтому каждый пакет PES, составляющий вторичный PS (программный поток, поставляемый из локального запоминающего устройства), отправляется в декодер в течение периода времени, когда пакет, чей тип является таким же, как в первичном PS (программном потоке, поставляемом с BD-ROM), или периода времени, когда первичный TS не пересылается, как показано на фиг.39. В случае когда элементарные потоки, поставляемые из локального запоминающего устройства, созданы в формате программного потока, период времени, когда пересылается пакет, чей тип является таким же, как в первичном TS, или период времени, когда первичный TS не пересылается, выражены в больших единицах времени, пачке (пакете PES). Поэтому накладные расходы, когда выполняется авторская разработка, являются существенно меньшими, каковое помогает осуществляться приложению сверхуплотнения. Это является преимуществом, когда приложение сверхуплотнения реализовано в устройстве воспроизведения DVD.In the case where the elementary streams supplied from the local storage device are not created in the transport stream format, but in the program stream format, the multiplexer 60 converts the PES packets constituting the elementary streams into packets, and the SCR (system time stamp) is attached to the TS header of each packet . An SCR attached in this way also indicates, like ATS, the period of time when a packet is forwarded whose type is the same as in the primary TS, or the period of time when the primary TS is not forwarded. Therefore, each PES packet constituting the secondary PS (program stream supplied from the local storage device) is sent to the decoder for a period of time when the packet whose type is the same as that of the primary PS (program stream supplied with the BD-ROM) , or a period of time when the primary TS is not forwarded, as shown in FIG. In the case when elementary streams delivered from a local storage device are created in the program stream format, the time period when a packet is forwarded whose type is the same as in the primary TS, or the time period when the primary TS is not forwarded are expressed in large units time, pack (PES package). Therefore, the overhead when the authoring is performed is significantly less, which helps the application of over-compaction. This is an advantage when the over-compaction application is implemented in the DVD player.

Таким образом, настоящий вариант осуществления выполняет мультиплексирование посредством выбора, в качестве периодов ввода для пакетов, составляющих вторичный TS, периода времени, когда пересылается пакет, чей тип является таким же, как в первичном TS, или периода времени, когда первичный TS не пересылается. Это способствует ограничению количества битов, показанному удовлетворяемым в варианте 1 осуществления. Осуществление такого мультиплексирования в системе авторской разработки по варианту 2 осуществления облегчает постановку кинофильма с выполнением приложения сверхуплотнения. Посредством этого гарантия отсутствия переполнения в течение воспроизведения может быть легко реализована, когда выполняется авторская разработка.Thus, the present embodiment performs multiplexing by selecting, as input periods for the packets constituting the secondary TS, the time period when the packet is forwarded, whose type is the same as in the primary TS, or the time period when the primary TS is not forwarded. This helps to limit the number of bits shown satisfactory in Embodiment 1. The implementation of such multiplexing in the authoring system according to option 2 implementation facilitates the formulation of the movie with the application of super-compaction. By this, the guarantee of no overflow during playback can be easily implemented when the authoring is performed.

Вариант 5 осуществленияOption 5 implementation

В настоящем варианте осуществления подробно пояснено приложение микширования аудио. Это приложение включает в себя исключение для правила сверхуплотнения по выбору только одного элементарного потока для каждого типа. То есть приложение микширования аудио совместно выбирает одновременно аудиопоток для первичного TS и аудиопоток для вторичного TS, и одновременно декодирует два аудио, аудио первичного TS и аудио вторичного TS.In the present embodiment, an audio mixing application is explained in detail. This appendix includes an exception to the supercompression rule for selecting only one elementary flow for each type. That is, the audio mixing application simultaneously selects the audio stream for the primary TS and the audio stream for the secondary TS, and simultaneously decodes two audio, audio of the primary TS and audio of the secondary TS.

Фиг.40 показывает способ, которым первичный TS и вторичный TS, составляющие приложение микширования аудио, подаются в декодер в устройстве воспроизведения BD-ROM. На фигуре в числе внутренних структурных компонентов устройства воспроизведения BD-ROM дисковод 1a BD-ROM, локальное запоминающее устройство 200 и сетевой модуль 25 показаны по левую сторону, тогда как соответственные декодеры показаны по правую сторону. Фильтр PID, который выполняет демультиплексирование потока, показан в центре. Первичный TS (видео 1, аудио 1 (английский язык), аудио 2 (испанский язык), PG 1 (субтитры на английском языке), IG 1 (меню на английском языке)) и вторичный TS (аудио 3 (дикторский текст), PG 2 (субтитры на японском языке), PG 3 (субтитры на корейском языке), IG 4 (субтитры на китайском языке), IG 2 (меню на японском языке)) на фигуре являются транспортными потоками, поставляемыми с BD-ROM и локального запоминающего устройства соответственно. Поскольку только английский язык (аудио 1) и испанский язык (аудио 2) записаны на диске, дикторский текст режиссера кинофильма не может быть выбран на диске. Однако посредством загрузки в локальное запоминающее устройство вторичного TS, который включает в себя аудио 3, поставляемое поставщиком контента, аудио на английском языке (аудио 1), аудио 3 (дикторский текст) могут отправляться в декодер. Затем декодер смешивает аудио на английском языке (аудио 1) и аудио 3 (дикторский текст) и выводит результат, который предоставляет пользователю возможность воспроизводить вместе с видео (видео 1) аудио на английском языке, к которому присоединен дикторский текст.40 shows a method by which a primary TS and a secondary TS constituting an audio mixing application are supplied to a decoder in a BD-ROM reproducing apparatus. In the figure, among the internal structural components of the BD-ROM playback device, the BD-ROM drive 1a, the local storage device 200, and the network module 25 are shown on the left side, while the respective decoders are shown on the right side. A PID filter that performs stream demultiplexing is shown in the center. Primary TS (video 1, audio 1 (English), audio 2 (Spanish), PG 1 (English subtitles), IG 1 (English menu)) and secondary TS (audio 3 (narrator), PG 2 (subtitles in Japanese), PG 3 (subtitles in Korean), IG 4 (subtitles in Chinese), IG 2 (menu in Japanese) in the figure are the transport streams supplied with the BD-ROM and local storage respectively. Since only English (audio 1) and Spanish (audio 2) are recorded on the disc, the announcer's text of the movie director cannot be selected on the disc. However, by downloading to the local storage device a secondary TS, which includes audio 3 provided by the content provider, English audio (audio 1), audio 3 (narration text) can be sent to the decoder. The decoder then mixes the audio in English (audio 1) and audio 3 (narrator text) and outputs a result that allows the user to play together with the video (video 1) audio in English, to which the narrator text is attached.

Здесь единственным отличием от приложения сверхуплотнения является декодирование двух аудиопотоков одновременно. С первичным TS, может возникать случай, где, например, аудио дикторского текста режиссера желательно добавлять после выпуска диска. Соответственно, ограничение на битовую скорость первичного TS не является предпочтительным, а потому вводится ограничение на вторичный поток TS, как в случае приложения сверхуплотнения. Поскольку микшированию аудио необходимо декодировать аудио в дополнение к каждому элементарному потоку (видео, аудио, субтитру и меню), необходимы две номенклатуры аудиодекодера.Here, the only difference from the overcompression application is the decoding of two audio streams simultaneously. With the primary TS, a case may arise where, for example, it is desirable to add the audio of the announcer's text of the director after the release of the disc. Accordingly, a limitation on the bit rate of the primary TS is not preferable, and therefore, a restriction on the secondary TS stream is introduced, as in the case of supercompression. Since audio mixing needs to decode audio in addition to each elementary stream (video, audio, subtitle and menu), two nomenclatures of audio decoder are needed.

<Структуры первичных и вторичных аудиопотоков><Structures of primary and secondary audio streams>

При реализации приложения микширования аудио, аудиопоток, который будет принадлежать первичному TS, указывается ссылкой как первичный аудиопоток, тогда как аудиопоток, который будет принадлежать вторичному TS, указывается ссылкой как вторичный аудиопоток. Последующее описывает такие первичные и вторичные аудиопотоки.When implementing an audio mixing application, an audio stream that will belong to the primary TS is referred to as a primary audio stream, while an audio stream that will belong to a secondary TS is referred to as a secondary audio stream. The following describes such primary and secondary audio streams.

Есть 32 первичных аудиопотока, каждый из которых имеет разный PID, из числа с 0x1100 по 0x111F. С другой стороны, подобно первичным потокам, есть 32 вторичных аудиопотока, каждый из которых имеет разный PID из числа от 0x1A00 по 0x1A1F.There are 32 primary audio streams, each of which has a different PID, from 0x1100 to 0x111F. On the other hand, like primary streams, there are 32 secondary audio streams, each of which has a different PID from a number from 0x1A00 to 0x1A1F.

Отличие вторичных аудиопотоков от первичных аудиопотоков состоит в том, что аудиокадры вторичных аудиопотоков включают в себя метаданные, составленные из «информации понижающего микширования» и «информации регулировки усиления».The difference between the secondary audio streams and the primary audio streams is that the audio frames of the secondary audio streams include metadata composed of “downmix information” and “gain control information”.

«Информацией понижающего микширования» является информация для понижающего микширования. Понижающее микширование является преобразованием, которое превращает количество каналов воспроизведения аудио в меньшее, чем количество кодированных каналов. Информация понижающего микширования задает матрицу коэффициентов преобразования для понижающего микширования и, тем самым, заставляет устройство воспроизведения выполнять понижающее микширование. Воспроизведение 5.1-канального аудиопотока после преобразования его в 2-канальный аудиопоток является одним из примеров понижающего микширования.“Downmix Information” is information for downmixing. Downmix is a conversion that turns the number of audio playback channels into less than the number of encoded channels. The downmix information defines a matrix of transform coefficients for the downmix and thereby causes the playback device to downmix. Playing a 5.1-channel audio stream after converting it to a 2-channel audio stream is one example of down-mix.

«Информация регулировки усиления» является информацией для повышения или снижения коэффициента усиления аудиовыхода первичного аудиопотока; однако здесь информация управления коэффициентом усиления должна только снижать коэффициент усиления. Таким образом, метаданные вторичного аудиопотока способны снижать в реальном времени выходную мощность первичного аудиопотока, который воспроизводится одновременно с вторичным аудиопотоком. В случае наложения вторичного аудио на первичное аудио, поскольку пара первичного аудио и вторичного аудио, которые должны микшироваться, известна заранее, есть необходимость регулировать коэффициент усиления двух аудио в реальном времени. В этом случае микширование (наложение) может хорошо осуществляться только посредством снижения коэффициента усиления первичного аудио наряду с сохранением коэффициента усиления вторичного аудио неизменным. Посредством предоставления таких метаданных возможно избежать возникновения нарастания выходного уровня звука воспроизведения первичного аудиопотока и выходного уровня звука воспроизведения вторичного аудиопотока и, таким образом, повреждения акустических колонок. В этом заключаются аудиопотоки по настоящему варианту осуществления. Следующими описаны усовершенствования информации списка воспроизведения по настоящему варианту осуществления.“Gain control information” is information for increasing or decreasing the gain of an audio output of a primary audio stream; however, here gain control information should only reduce gain. Thus, the metadata of the secondary audio stream is able to reduce in real time the output power of the primary audio stream, which is played simultaneously with the secondary audio stream. In the case of superimposing secondary audio on primary audio, since the pair of primary audio and secondary audio to be mixed is known in advance, there is a need to adjust the gain of the two audio in real time. In this case, mixing (overlay) can only be done well by reducing the gain of the primary audio while keeping the gain of the secondary audio unchanged. By providing such metadata, it is possible to avoid an increase in the output sound level of the reproduction of the primary audio stream and the output sound level of the reproduction of the secondary audio stream and, thus, damage to the speakers. This is the audio streams of the present embodiment. The following describes the enhancements to the playlist information of the present embodiment.

<Таблица STN (STN_table) для реализации приложения микширования аудио><STN table (STN_table) for implementing an audio mixing application>

Элементарные потоки одного и того же типа должны декодироваться декодером одновременно, а потому касательно информации списка воспроизведения по настоящему варианту осуществления многочисленные первичные аудиопотоки и многочисленные вторичные аудиопотоки, разрешенные для воспроизведения, показаны в таблице STN (STN_table) каждого элемента воспроизведения.Elementary streams of the same type must be decoded by the decoder at the same time, and therefore, regarding the playlist information of the present embodiment, the multiple primary audio streams and the multiple secondary audio streams allowed for playback are shown in the STN (STN_table) table of each playitem.

Последующее описывает таблицу STN (STN_table) по настоящему варианту осуществления. Для реализации приложения микширования аудио пары входа потока (Stream_entry) и атрибута потока (Stream_attribute) во вторичных аудиопотоках присутствуют в таблице STN (STN_table) в дополнение к парам входа потока (Stream_entry) и атрибута потока (Stream_attribute) в первичных аудиопотоках. Каждая пара входа потока (Stream_entry) и атрибута потока (Stream_attribute) во вторичных аудиопотоках ассоциативно связана с информацией объединения вторичного аудио и первичного аудио (Comb_info_Secondary_audio_Primary_audio).The following describes the STN table (STN_table) of the present embodiment. To implement the audio mixing application, the stream input pairs (Stream_entry) and stream attribute (Stream_attribute) in the secondary audio streams are present in the STN table (STN_table) in addition to the stream input pair (Stream_entry) and stream attribute (Stream_attribute) in the primary audio streams. Each pair of stream input (Stream_entry) and stream attribute (Stream_attribute) in the secondary audio streams is associated with information of combining secondary audio and primary audio (Comb_info_Secondary_audio_Primary_audio).

(Информация объединения вторичного аудио и первичного аудио (Comb_info_Secondary_audio_Primary_audio))(Information combining secondary audio and primary audio (Comb_info_Secondary_audio_Primary_audio))

Информация объединения вторичного аудио и первичного аудио (Comb_info_Secondary_audio_Primary_audio) уникально задает один или более первичных аудиопотоков, с которыми может микшироваться воспроизведение вторичных аудиопотоков. Это предусматривает, когда выполняется авторская разработка, создание настройки необходимости микширования согласно атрибуту аудио, так что, например, вторичный аудиопоток не микшируется, когда должен воспроизводиться первичный аудиопоток, имеющий предопределенный атрибут, тогда как вторичный аудиопоток микшируется, когда должен воспроизводиться первичный аудиопоток, имеющий атрибут, иной чем предопределенный атрибут.Information combining the secondary audio and primary audio (Comb_info_Secondary_audio_Primary_audio) uniquely defines one or more primary audio streams with which the playback of the secondary audio streams can be mixed. This involves when authoring is performed, creating a mix-up setting according to the audio attribute, so that, for example, the secondary audio stream is not mixed when the primary audio stream having a predetermined attribute is to be played, while the secondary audio stream is mixed when the primary audio stream having the attribute is to be played other than a predefined attribute.

(Информация об условии соединения SP (sp_connection_condition Information))(SP connection information (sp_connection_condition Information))

В информации списка воспроизведения такое же значение, как информация об условии соединения (connection_condition) информации об элементе воспроизведения, установлено для информации условия соединения SP (sp_connection_condition) элемента вспомогательного воспроизведения. Поэтому, когда информацией об условии соединения (connection_condition) информации об элементе воспроизведения является «=5», информация об условии соединения SP (sp_connection_condition) информации об элементе вспомогательного воспроизведения также устанавливается в качестве «SP_CC=5». В дополнение, информация о моменте времени начала (In_Time) и моменте времени окончания (Out_Time) элемента вспомогательного воспроизведения показывает такие же моменты времени, как информация о моменте времени начала (In_Time) и моменте времени окончания (Out_Time) элемента воспроизведения.In the playlist information, the same value as the connection condition information (connection_condition) of the playitem information is set for the connection condition information SP (sp_connection_condition) of the auxiliary playitem. Therefore, when the connection item information (connection_condition) of the playitem information is “= 5”, the connection condition information SP (sp_connection_condition) of the auxiliary playitem information is also set to “SP_CC = 5”. In addition, the information about the start time (In_Time) and the end time (Out_Time) of the sub play item shows the same time points as the information about the start time (In_Time) and the end time (Out_Time) of the play item.

В этом заключается усовершенствование носителя записи по настоящему варианту осуществления. Следующей описана внутренняя структура устройства воспроизведения по настоящему варианту осуществления.This is an improvement in the recording medium of the present embodiment. The following describes the internal structure of the reproducing apparatus of the present embodiment.

<Внутренняя структура устройства воспроизведения><Internal structure of the playback device>

Фиг.41 показывает внутреннюю структуру устройства воспроизведения согласно варианту 5 осуществления. TB 6, EB 7 и аудиодекодер 8 замещены процессором микширования аудио (охвачен пунктирными линиями), как показано на фигуре. Процессор микширования аудио вводит два аудиопотока из первичного TS и вторичного TS, одновременно их декодирует и смешивает их. Оставшаяся часть внутренней структуры является такой же, как таковая для реализации приложения сверхуплотнения. Следующим описан процессор микширования. Процессор микширования состоит из: транспортных буферов 6a и 6b; EB 7a и 7b; буфера 7c предварительной загрузки; аудиодекодеров 8a и 8b и микшеров 9a и 9b.Fig. 41 shows an internal structure of a reproducing apparatus according to Embodiment 5. TB 6, EB 7 and audio decoder 8 are replaced by an audio mixing processor (covered by dashed lines), as shown in the figure. The audio mixing processor introduces two audio streams from the primary TS and secondary TS, decodes and mixes them at the same time. The remainder of the internal structure is the same as that for the implementation of the superconsolidation application. The following describes the mixing processor. The mixing processor consists of: transport buffers 6a and 6b; EB 7a and 7b; preload buffer 7c; audio decoders 8a and 8b and mixers 9a and 9b.

Транспортный буфер 6a хранит пакеты TS, имеющие PID аудиопотоков и выведенные из фильтра 3b PID способом «первым вошел - первым вышел», и отправляет пакеты TS в аудиодекодер 8a.Transport buffer 6a stores TS packets having PIDs of audio streams and PIDs derived from PID filter 3b in a first-in-first out manner, and sends TS packets to audio decoder 8a.

Транспортный буфер 6b хранит пакеты TS, имеющие PID аудиопотоков и выводимые из фильтра 3d PID способом «первым вошел - первым вышел», и отправляет пакеты TS в аудиодекодер 8b.The transport buffer 6b stores TS packets having PIDs of audio streams and output from the 3d PID filter in a “first in, first out” manner, and sends TS packets to the audio decoder 8b.

EB 7a является буфером, который хранит пакеты PES, полученные преобразованием пакетов TS, хранимых в буфере 6a.EB 7a is a buffer that stores PES packets received by converting TS packets stored in buffer 6a.

EB 7b является буфером, который хранит пакеты PES, полученные преобразованием пакетов TS, хранимых в буфере 6a.EB 7b is a buffer that stores PES packets received by converting TS packets stored in buffer 6a.

Буфер 7c предварительной загрузки является памятью для предварительной загрузки файла sound.bdmv, считанного из BD-ROM/локального запоминающего устройства. Файл sound.bdmv является файлом, который хранит в нем аудиоданные, которые должны выводиться в ответ на операцию, произведенную над меню.The preload buffer 7c is a memory for preloading the sound.bdmv file read from the BD-ROM / local storage device. The sound.bdmv file is a file that stores audio data in it, which should be displayed in response to an operation performed on a menu.

Аудиодекодер 8a декодирует пакеты PES, составляющие первичный TS, чтобы, тем самым, получить несжатые аудиоданные в состоянии LPCM, и выводит полученные аудиоданные. Это успешно выполняет цифровой вывод аудиопотока.The audio decoder 8a decodes the PES packets constituting the primary TS to thereby obtain uncompressed audio data in the LPCM state, and outputs the received audio data. It successfully performs digital audio stream output.

Аудиодекодер 8b декодирует пакеты PES, составляющие вторичный TS, чтобы, тем самым, получить несжатые аудиоданные в состоянии LPCM, и выводит полученные аудиоданные. Это успешно выполняет цифровой вывод аудиопотока.The audio decoder 8b decodes the PES packets constituting the secondary TS to thereby obtain uncompressed audio data in the LPCM state, and outputs the received audio data. It successfully performs digital audio stream output.

Микшер 9a микширует цифровое аудио в состоянии LPCM, выведенное из аудиодекодера 8a, и цифровое аудио в состоянии LPCM, выведенное из аудиодекодера 8b.The mixer 9a mixes the digital audio in the LPCM state outputted from the audio decoder 8a and the digital audio in the LPCM state outputted from the audio decoder 8b.

Микшер 9b микширует цифровое аудио в состоянии LPCM, выведенное из микшера 9a, и акустические данные, сохраненные в буфере 7c. Эта операция микширования посредством звукового микшера 9b осуществляется тем, что контроллер 22 декодирует команду навигации с намерением испускать звук щелчка кнопкой.The mixer 9b mixes the digital audio in the LPCM state output from the mixer 9a and the acoustic data stored in the buffer 7c. This mixing operation by the sound mixer 9b is carried out in that the controller 22 decodes the navigation command with the intention of emitting a click sound of a button.

В этом заключается описание устройства воспроизведения по настоящему варианту осуществления.This is a description of the reproducing apparatus of the present embodiment.

<Проверка по приложению микширования аудио><Testing by audio mixing application>

Поскольку приложение микширования аудио состоит из первичных аудиопотоков и вторичных аудиопотоков, как описано выше, проверка, которая показана в варианте 2 осуществления, проводится с допущением, что первичный аудиопоток и вторичный аудиопоток были считаны одновременно. Точнее говоря, окно сдвигается на один пакет в каждый момент времени на временной оси ATC, на который ссылается основной клип и вспомогательный клип. Процедура сдвига является такой же, как показанная в блок-схеме последовательности операций способа по фиг.35. В каждой координате временной оси ATC, указанной посредством ATS, поток, имеющий наивысшую рассчитанную битовую скорость, выбирается по каждому типу видеопотока, многочисленных первичных аудиопотоков, многочисленных вторичных аудиопотоков, многочисленных потоков PG и многочисленных потоков IG. Наивысшая битовая скорость видеопотока, наивысшая битовая скорость первичного аудиопотока, наивысшая битовая скорость вторичного аудиопотока, наивысшая битовая скорость потока PG и наивысшая битовая скорость потока IG суммируются и производится оценка, является ли итоговой суммой 48 Мбит или меньше. Если итоговая сумма превышает 48 Мбит, определяется, что есть нарушение стандартизации BD-ROM.Since the audio mixing application consists of primary audio streams and secondary audio streams, as described above, the verification, which is shown in Embodiment 2, is carried out under the assumption that the primary audio stream and the secondary audio stream have been read at the same time. More specifically, the window shifts one packet at a time on the ATC timeline referenced by the main clip and sub clip. The shift procedure is the same as that shown in the flowchart of the method of FIG. 35. At each coordinate of the ATC time axis indicated by the ATS, the stream having the highest calculated bit rate is selected for each type of video stream, multiple primary audio streams, multiple secondary audio streams, multiple PG streams and multiple IG streams. The highest bit rate of the video stream, the highest bit rate of the primary audio stream, the highest bit rate of the secondary audio stream, the highest bit rate of the PG stream and the highest bit rate of the IG stream are added up and it is judged whether the total is 48 Mbps or less. If the total amount exceeds 48 Mbit, it is determined that there is a violation of the standardization of BD-ROM.

Таким образом, согласно настоящему варианту осуществления гарантируется, что количество бит в секунду не превышает предопределенного верхнего предела, даже когда первичные и вторичные аудиопотоки одновременно считываются как из BD-ROM, так и локального запоминающего устройства, и подаются в декодеры для первичных и вторичных аудиопотоков. При такой гарантии приложение микширования аудио может создаваться рационально. Это дает возможность системы поставки, которая загружает в локальное запоминающее устройство дополнительный контент, который реализует приложение микширования аудио и поставляет его в декодер из локального запоминающего устройства. Поэтому может быть легко реализована компоновка поставки, например, для добавления дикторского текста после отгрузки BD-ROM.Thus, according to the present embodiment, it is guaranteed that the number of bits per second does not exceed a predetermined upper limit, even when the primary and secondary audio streams are simultaneously read from both the BD-ROM and the local storage device and supplied to decoders for the primary and secondary audio streams. With such a guarantee, an audio mixing application can be created rationally. This enables a delivery system that loads additional content into the local storage device that implements the audio mixing application and delivers it to the decoder from the local storage device. Therefore, the delivery layout can be easily implemented, for example, to add narration after shipment of the BD-ROM.

Вариант 6 осуществленияOption 6 implementation

В варианте 1 осуществления точки соединения между элементами воспроизведения и между элементами вспомогательного воспроизведения согласованы посредством подгонки моментов времени начала (In_Time) и моментов времени окончания (Out_Time) элементов воспроизведения и моментов времени начала (In_Time) и моментов времени окончания (Out_Time) элементов вспомогательного воспроизведения. С другой стороны, настоящий вариант осуществления не требует, чтобы точки соединения согласовывались и предоставляет возможность некоторой степени разновременности, для того чтобы осуществлять микширование аудио.In Embodiment 1, the connection points between the playitems and between the auxiliary playitems are matched by adjusting the start time points (In_Time) and the end time points (Out_Time) of the playitems and the start time points (In_Time) and the end time points (Out_Time) of the auxiliary playitems. On the other hand, the present embodiment does not require the connection points to be consistent and allows some degree of simultaneity in order to mix the audio.

В случае предоставления возможности разновременности требуется другое ограничение. Вышеупомянутая последовательность операций изменения STC выполняется на безразрывных соединениях между элементами воспроизведения и между элементами вспомогательного воспроизведения, и эта последовательность операций изменения выполняется, когда декодер находится в состоянии без внешней синхронизации. Здесь в безразрывном соединении, декодер не может переходить к синхронному управлению до тех пор, пока не возвращена STC, а потому безразрывное соединение, привлекающее изменение STC, не может допускаться часто вследствие проблем реализации. Соответственно, точки соединения CC=5, остающиеся как в элементах воспроизведения, так и элементах вспомогательного воспроизведения, должны сдерживаться от появления на предопределенный интервал (например, три секунды или около этого) друг от друга.In the case of providing the possibility of simultaneity requires another restriction. The aforementioned STC change sequence of operations is performed on seamless connections between playitems and between sub-playitems, and this change process is executed when the decoder is in a state without external synchronization. Here, in an uninterrupted connection, the decoder cannot switch to synchronous control until the STC is returned, and therefore an uninterrupted connection involving an STC change cannot often be allowed due to implementation problems. Accordingly, the connection points CC = 5 remaining both in the playitems and the auxiliary playitems must be restrained from appearing at a predetermined interval (for example, three seconds or so) from each other.

Фиг.42 показывает взаимосвязь между элементами воспроизведения и элементами вспомогательного воспроизведения, заданными списком воспроизведения, указывающим микширование аудио. Уровень 1 по фиг.42 показывает три элемента воспроизведения (информацию #1 об элементе воспроизведения, информацию #2 об элементе воспроизведения и информацию #3 об элементе воспроизведения) в информации списка воспроизведения. Эти три элемента воспроизведения задают первичный TS, а соединение между информацией #1 и #2 об элементе воспроизведения установлено в CC=1, тогда как соединение между информацией #2 и #3 об элементах воспроизведения установлено в CC=5. Уровень 2 по фиг.42 показывает три элемента вспомогательного воспроизведения (элемент #1 вспомогательного воспроизведения, элемент #2 вспомогательного воспроизведения и элемент #3 вспомогательного воспроизведения) в информации списка воспроизведения. Эти три элемента вспомогательного воспроизведения задают вторичный TS, а соединение между элементами #1 и #2 вспомогательного воспроизведения установлено в CC=1, тогда как соединение между элементами #2 и #3 вспомогательного воспроизведения установлено в CC=5. Уровень 3 по фиг.42 показывает девять элементов вспомогательного воспроизведения (элемент #1 вспомогательного воспроизведения, элемент #2 вспомогательного воспроизведения, с элемента #3 вспомогательного воспроизведения по элемент #9 вспомогательного воспроизведения) в информации прогрессивного списка воспроизведения. Эти девять элементов вспомогательного воспроизведения задают вторичный TS. Здесь соединение между элементами #3 и #4 вспомогательного воспроизведения установлено в CC=1, соединение между элементами #4 и #5 вспомогательного воспроизведения установлено в CC=5, а оставшиеся соединения установлены в CC=6.Fig. 42 shows a relationship between playitems and sub-playitems defined by a playlist indicating audio mixing. Level 1 of FIG. 42 shows three playitems (playitem information # 1, playitem information # 2 and playitem information # 3) in the playlist information. These three playitems define the primary TS, and the connection between the playitem information # 1 and # 2 is set to CC = 1, while the connection between the playitem information # 2 and # 3 is set to CC = 5. The level 2 of FIG. 42 shows three sub-play items (sub-play item # 1, sub-play item # 2 and sub-play item # 3) in the playlist information. These three sub-play elements define the secondary TS, and the connection between the sub-play items # 1 and # 2 is set to CC = 1, while the connection between the sub-play items # 2 and # 3 is set to CC = 5. The level 3 of FIG. 42 shows nine sub-play items (sub-play item # 1, sub-play item # 2, from sub-play item # 3 to sub-play item # 9) in the progressive playlist information. These nine sub-play elements define the secondary TS. Here, the connection between the sub-play items # 3 and # 4 is set to CC = 1, the connection between the sub-play items # 4 and # 5 is set to CC = 5, and the remaining connections are set to CC = 6.

На фигуре началом элемента #3 вспомогательного воспроизведения уровня 2 является 3 секунды до начального момента элемента #3 воспроизведения уровня 1. Подобным образом, начальным моментом элемента #5 вспомогательного воспроизведения уровня 3 является 3 секунды до начального момента элемента #3 воспроизведения уровня 1.In the figure, the start of the level 2 sub-play element # 3 is 3 seconds before the start of the level 1 play-back item # 3. Similarly, the start moment of the level 3 sub-play item # 5 is 3 seconds before the start of the level 1 play-back element # 3.

Период времени для изменения временных осей STC элементов воспроизведения и элементов вспомогательного воспроизведения составляет 3 секунды, а потому изменение временных осей STC не происходит слишком часто.The time period for changing the time axes of the STC playitems and auxiliary play items is 3 seconds, and therefore, the change of the time axes of the STC does not occur too often.

Временная привязка CC=1 для элементов воспроизведения установлена в соответствии с SP_CC=1. Это предназначено для предохранения воспроизведения элементов воспроизведения и элементов вспомогательного воспроизведения от выхода из синхронизации в случае, где продолжается воспроизведение только элементов вспомогательного воспроизведения, когда соединение является небезразрывным при CC=1.The timing CC = 1 for playitems is set in accordance with SP_CC = 1. This is intended to prevent the reproduction of playback elements and auxiliary playback elements from exiting synchronization in the case where playback continues only of auxiliary playback elements when the connection is non-interrupted at CC = 1.

Режим соединения по соединению элементов вспомогательного воспроизведения при SP_CC=5 в середине элементов воспроизведения становится полезным, когда и сценический вариант, и режиссерская нарезка сохранены на одиночном диске.The connection mode for connecting auxiliary playback elements with SP_CC = 5 in the middle of the playback elements becomes useful when both the stage version and the director’s cut are stored on a single disc.

Уровень 1 по фиг.43 показывает пример информации списка воспроизведения, составляющей как сценический вариант, так и режиссерскую нарезку. В пределах информации списка воспроизведения режиссерская нарезка состоит из элемента #1 воспроизведения, элемента #2 воспроизведения и элемента #4 воспроизведения, тогда как сценический вариант состоит из элемента #1 воспроизведения, элемента #3 воспроизведения и элемента #4 воспроизведения. Таким образом, поскольку элемент #1 воспроизведения и элемент #4 воспроизведения совместно используются двумя вариантами, главы могут создаваться рационально. Так как часть видео в каждом варианте, отличном от другого, является более коротким, чем полная продолжительность видео, объем данных, записанный на диск, может эффективно сокращаться. Уровень 2 по фиг.43 показывает пример, в котором дикторские тексты, соответствующие элементу #1 воспроизведения, элементу #2 воспроизведения и элементу #4 воспроизведения уровня 1, определены в качестве одного элемента вспомогательного воспроизведения, а дикторские тексты, соответствующие элементу #1 воспроизведения, элементу #3 воспроизведения и элементу #4 воспроизведения, определены в качестве другого элемента вспомогательного воспроизведения. В этом случае дикторские тексты, соответствующие элементу #1 воспроизведения и элементу #4 воспроизведения, должны быть приготовлены для каждого из двух элементов вспомогательного воспроизведения, каковое является неблагоприятным в показателях объема данных.Level 1 of FIG. 43 shows an example of playlist information constituting both a stage version and a directorial cut. Within the playlist information, the directorial cut consists of a playitem # 1, a playitem # 2 and a playitem # 4, while a stage version consists of a playitem # 1, a playitem # 3, and a playitem # 4. Thus, since the playitem # 1 and the playitem # 4 are shared in two ways, chapters can be created rationally. Since part of the video in each version different from the other is shorter than the total duration of the video, the amount of data recorded on the disc can be effectively reduced. The level 2 of FIG. 43 shows an example in which the speaker texts corresponding to the playback element # 1, the playback element # 2 and the level 1 playback element # 4 are defined as one auxiliary playback element, and the speaker texts corresponding to the playback element # 1, playitem # 3 and playitem # 4 are defined as another sub-playitem. In this case, the narration texts corresponding to the playback element # 1 and the playback element # 4 should be prepared for each of the two auxiliary playback elements, which is unfavorable in terms of data volume.

Уровень 3 по фиг.43 показывает пример, в котором определены элементы вспомогательного воспроизведения (элемент #1 вспомогательного воспроизведения, элемент #2 вспомогательного воспроизведения, элемент #3 вспомогательного воспроизведения и элемент #4 вспомогательного воспроизведения), каждый из которых соответствует элементу #1 воспроизведения, элементу #2 воспроизведения, элементу #3 воспроизведения и элементу #4 воспроизведения. Допустим, что соединения элемента #1 вспомогательного воспроизведения с элементом #2 вспомогательного воспроизведения и с элементом #3 вспомогательного воспроизведения, а также соединения элемента #2 вспомогательного воспроизведения с элементом #3 вспомогательного воспроизведения и с элементом #4 вспомогательного воспроизведения находятся в состоянии CC=5. Эти точки соединения появляются в моменты времени в стороне от точек соединения элементов воспроизведения. То есть на стороне дикторского текста ветвление до элемента #2 вспомогательного воспроизведения или элемента #3 вспомогательного воспроизведения вызывается за 3 секунды до того, как заканчивается элемент #1 воспроизведения, с использованием CC=5 (или CC=6).The level 3 of FIG. 43 shows an example in which sub-play items (sub-play item # 1, sub-play item # 2, sub-play item # 3, and sub-play item # 4) are defined, each of which corresponds to a play item # 1, playitem # 2, playitem # 3, and playitem # 4. Assume that the connections of the auxiliary playback element # 1 to the auxiliary playback element # 2 and to the auxiliary playback element # 3, as well as the connections of the auxiliary playback element # 2 to the auxiliary playback element # 3 and to the auxiliary playback element # 4 are in the state CC = 5 . These connection points appear at time points away from the connection points of the playitems. That is, on the announcer's text side, a branch to the sub-play element # 2 or the sub-play element # 3 is called up 3 seconds before the playback element # 1 ends using CC = 5 (or CC = 6).

В дополнение, ветвление до элемента #4 вспомогательного воспроизведения вызывается 3 секунды спустя после того, как заканчиваются элемент #2 воспроизведения и элемент #3 воспроизведения, с использованием CC=5 (или CC=6). Начала элемента #2 вспомогательного воспроизведения и элемента #3 вспомогательного воспроизведения и начало элемента #4 вспомогательного воспроизведения находятся соответственно на 3 секунды в стороне от начал элемента #2 воспроизведения и элемента #3 воспроизведения и начала элемента #4 воспроизведения. Посредством обеспечения таких периодов времени изменение временных осей STC не происходит слишком часто.In addition, branching to sub-play item # 4 is called out 3 seconds after the play item # 2 and play item # 3 are completed using CC = 5 (or CC = 6). The beginning of the auxiliary playback element # 2 and the auxiliary playback element # 3 and the beginning of the auxiliary playback element # 4 are respectively 3 seconds away from the beginning of the playback element # 2 and the playback element # 3 and the beginning of the playback element # 4. By providing such time periods, changing the time axes of the STC does not occur too often.

В определенном смысле, CC=5 требуется, исключительно чтобы вызывать возврат с элемента #3 вспомогательного воспроизведения на элемент #4 вспомогательного воспроизведения (безразрывное соединение, в котором временные оси ATC/STC переводятся в исходное состояние), а CC=6 может использоваться вместо CC=5 для оставшихся ветвлений.In a certain sense, CC = 5 is required solely to cause a return from sub-play element # 3 to sub-play element # 4 (a seamless connection in which the ATC / STC time axes are reset), and CC = 6 can be used instead of CC = 5 for the remaining branches.

Таким образом, согласно настоящему варианту осуществления, поскольку момент времени начала (In_Time) и момент времени окончания (Out_Time) элементов воспроизведения не соответствуют моменту времени начала (In_Time) и моменту времени окончания (Out_Time) элементов вспомогательного воспроизведения, синхронизация счетчиков 2a и 2c ATC, а также счетчиков 3a и 3c STC не обязательна, каковое увеличивает свободу конструкции устройств воспроизведения.Thus, according to the present embodiment, since the start time (In_Time) and the end time (Out_Time) of the playitems do not correspond to the start time (In_Time) and the end time (Out_Time) of the sub play elements, synchronization of the ATC counters 2a and 2c, as well as counters 3a and 3c, the STC is optional, which increases the freedom of design of the playback devices.

Вариант 7 осуществленияOption 7 implementation

В варианте 6 осуществления, первичные и вторичные аудиопотоки являются целевыми объектами ограничения количества битов, когда они одновременно считываются с BD-ROM и локального запоминающего устройства и подаются в декодер. Настоящий вариант осуществления поясняет ограничение количества битов, накладываемое, когда реализуется приложение воспроизведения многооконной визуализации (PiP).In Embodiment 6, primary and secondary audio streams are targets for limiting the number of bits when they are simultaneously read from the BD-ROM and the local storage device and supplied to the decoder. The present embodiment explains the bit limit imposed when a multi-window rendering (PiP) rendering application is implemented.

Воспроизведение PiP, когда основные клипы, составляющие движущиеся изображения, заданы информацией об основном пути из информации списка воспроизведения и вспомогательные клипы, составляющие другой набор движущихся изображений, заданы информацией об элементах вспомогательного воспроизведения из информации списка воспроизведения, является технологией для отображения первых движущихся изображений (первичного видео) и последних движущихся изображений (вторичного видео) на одном и том же экране. Здесь первичное видео состоит из изображений HD, тогда как вторичное видео состоит из изображений SD. Изображения HD имеют разрешение 1920×1080 с циклом синхронизации кадров 3750 (в качестве альтернативы, 3753 или 3754), подобно пленочному материалу. Изображения SD имеют разрешение 720×480 с циклом синхронизации отображения 1501, подобно материалу NTSC (стандарта Национального комитета по телевизионным системам) или с циклом синхронизации кадров 1800, подобно материалу PAL (стандарта с построчным изменением фазы).PiP playback, when the main clips constituting the moving pictures are specified by the main path information from the playlist information and the sub clips constituting another set of moving pictures are defined by the information about the sub-items from the playlist information is a technology for displaying the first moving pictures (primary video) and the latest moving images (secondary video) on the same screen. Here, the primary video consists of HD images, while the secondary video consists of SD images. HD images have a resolution of 1920 × 1080 with a frame synchronization cycle of 3750 (alternatively, 3753 or 3754), similar to film material. SD images have a resolution of 720x480 with a display synchronization cycle of 1501, similar to NTSC material (standard of the National Committee for Television Systems) or a frame synchronization cycle of 1800, similar to PAL material (standard with progressive phase change).

Изображения SD имеют около 1/4 разрешения изображений HD, а потому, если первичное видео, которым являются изображения HD, и вторичное видео отображаются на одном и том же экране, габариты вторичного видео составляют около 1/4 по отношению к первичному видео.SD images have about 1/4 of the resolution of HD images, and therefore, if the primary video, which are HD images, and the secondary video are displayed on the same screen, the dimensions of the secondary video are about 1/4 relative to the primary video.

Здесь допустим, что вторичное видео является движущимися изображениями, в которых появляются режиссер и/или актерский состав и дают представление, например, выделение главных моментов по видеоконтенту первичного видео. В этом случае объединением видеоконтента вторичного видео с видеоконтентом первичного видео возможно реализовать развлекательный экранный эффект, где режиссер и актерский состав дают дикторский текст во время выделения главных моментов по контенту в видео воспроизведения кинофильма.Here we assume that the secondary video is moving images in which the director and / or cast appear and give an idea, for example, highlighting the main points in the video content of the primary video. In this case, by combining the video content of the secondary video with the video content of the primary video, it is possible to realize an entertaining screen effect, where the director and the cast give an announcer's text while highlighting the main points of the content in the video playing the movie.

<Информация списка воспроизведения по настоящему варианту осуществления><Playlist information of the present embodiment>

Видеопоток для вторичного видео (вторичный видеопоток) задается многочисленными частями информации об элементе вспомогательного воспроизведения в информации о вспомогательном пути из информации списка воспроизведения. К такой информации об элементе вспомогательного воспроизведения вновь добавлены элементы информации положения PiP (PiP_Position) и размера PiP (PiP_Size).The video stream for the secondary video (secondary video stream) is defined by numerous pieces of information about the sub-play item in the sub-path information from the play list information. To such information about the sub play item, the PiP position information (PiP_Position) and the PiP size information (PiP_Size) are again added.

«PiP_Position» («положение PiP) указывает с использованием координат X и Y на плоскости экрана, используемой для воспроизведения первичного видео, позицию, в которой должно быть расположено видео воспроизведения вторичного видео.“PiP_Position” indicates the position at which the secondary video playback video should be located using the X and Y coordinates on the screen plane used to play the primary video.

«PiP_Size» («размер PiP») указывает высоту и ширину видео воспроизведения вторичного видео."PiP_Size" ("PiP size") indicates the height and width of the video playback of the secondary video.

Дополнительно, информация об условии соединения SP элементов вспомогательного воспроизведения в настоящем варианте осуществления установлена в «=5». Это означает гарантию безразрывного соединения между вторичным видеопотоком, мультиплексированным во вспомогательные клипы текущего элемента вспомогательного воспроизведения, и вторичным видеопотоком, мультиплексированным во вспомогательный клип предыдущего элемента вспомогательного воспроизведения. Информация об условии соединения SP (sp_connection_condition) таких элементов вспомогательного воспроизведения установлена в такое же значение, как информация об условии соединения (connection_condition) из информации об элементе воспроизведения. Поэтому, если информацией об условии соединения (connection_condition) из информации об элементе воспроизведения является «=5», информация об условии соединения SP (sp_connection_condition) из информации об элементе вспомогательного воспроизведения также должна быть установлена в «=5». То есть если первичный видеопоток на стороне элемента воспроизведения соединяется безразрывно, вторичный видеопоток на стороне элемента вспомогательного воспроизведения должен соединяться безразрывно. В дополнение, информация о моменте времени начала (In_Time) и моменте времени окончания (Out_Time) элемента вспомогательного воспроизведения должна указывать такие же моменты времени, как информация о моменте времени начала (In_Time) и моменте времени окончания (Out_Time) элемента воспроизведения.Further, the connection condition information SP of sub play elements in the present embodiment is set to “= 5”. This means guaranteeing an uninterrupted connection between the secondary video stream multiplexed into auxiliary clips of the current auxiliary playback element and the secondary video stream multiplexed into the auxiliary clip of the previous auxiliary playback element. The connection condition information SP (sp_connection_condition) of such sub-play items is set to the same value as the connection condition information (connection_condition) from the play item information. Therefore, if the connection condition information (connection_condition) from the information about the playitem is “= 5”, the information about the connection condition SP (sp_connection_condition) from the information about the playitem should also be set to “= 5”. That is, if the primary video stream on the side of the playitem is connected seamlessly, the secondary video stream on the side of the playitem should be seamlessly connected. In addition, the information about the start time (In_Time) and the end time (Out_Time) of the sub play item should indicate the same time points as the information about the start time (In_Time) and the end time (Out_Time) of the play item.

В этом заключается описание носителя записи по настоящему варианту осуществления.This is the description of the recording medium of the present embodiment.

<Усовершенствование устройства воспроизведения по настоящему варианту осуществления><Improvement of the playback device of the present embodiment>

Последующее разъясняет усовершенствования устройства воспроизведения. Для того чтобы выполнять обработку декодирования вторичных видеопотоков, аппаратные средства устройства воспроизведения по настоящему варианту осуществления включают в себя еще один набор структурных элементов, используемых для декодирования видеопотоков. Здесь структурными элементами, используемыми для декодирования видеопотоков, являются: транспортный буфер; мультиплексированный буфер; элементарный буфер; декодер и видеоплата, и декодируют вторичные видеопотоки. В дополнение, устройство воспроизведения по настоящему варианту осуществления включает в себя модуль масштабирования и модуль синтеза, описанные ниже.The following explains improvements to the playback device. In order to perform decoding processing of the secondary video streams, the hardware of the reproducing apparatus of the present embodiment includes another set of structural elements used to decode the video streams. Here, the structural elements used to decode the video streams are: transport buffer; multiplexed buffer; elementary buffer; a decoder and a video card, and decode the secondary video streams. In addition, the reproducing apparatus of the present embodiment includes a scaling unit and a synthesis unit described below.

Модуль масштабирования увеличивает или уменьшает размер видео воспроизведения в плоскости вторичного видео по высоте и ширине, указанным размером PiP (PiP_Size) информации об элементе вспомогательного воспроизведения.The scaling module increases or decreases the size of the video playback in the plane of the secondary video in height and width indicated by the size PiP (PiP_Size) of the information about the sub-play element.

Модуль синтеза осуществляет воспроизведение PiP посредством синтеза видео воспроизведения, размер которого был увеличен модулем масштабирования, и видео воспроизведения, полученного видеодекодером. Синтез видео воспроизведения первичного видео и видео воспроизведения вторичного видео выполняется в соответствии с положением PiP (PiP_Position), заданным информацией об элементе вспомогательного видео. Посредством этого синтезированное видео, которое создано посредством синтеза видео воспроизведения первичного видео и видео воспроизведения вторичного видео, может воспроизводиться. Блок синтеза способен выполнять синтез цветовой PiPпроекции, синтез слоя и тому подобное и, например, выполняет последовательность операций удаления фона вторичного видео, извлечения изображения человека и синтеза изображения человека с видео воспроизведения первичного видео. В этом заключается описание устройства воспроизведения по настоящему варианту осуществления.The synthesis module reproduces PiP by synthesizing video playback, the size of which has been increased by the scaling module, and video playback received by the video decoder. The synthesis of video playback of the primary video and video playback of the secondary video is performed in accordance with the position PiP (PiP_Position) specified by the information about the element of the auxiliary video. By this, the synthesized video that is created by synthesizing video playing the primary video and video playing the secondary video can be played. The synthesis unit is capable of performing color PiP projection synthesis, layer synthesis, and the like, and, for example, performs a sequence of operations to remove the background of a secondary video, extract a human image, and synthesize a human image from a primary video playback video. This is a description of the reproducing apparatus of the present embodiment.

<Проверка по приложению PiP><Verification by PiP application>

В случае где видеопоток, который является первичным TS (первичный видеопоток), и видеопоток, который является вторичным видеопотоком (вторичный видеопоток), считываются одновременно и подаются в декодер, для того чтобы осуществлять воспроизведение PiP, первичные и вторичные видеопотоки являются целевыми объектами для проверки на ограничение количества битов.In the case where the video stream, which is the primary TS (primary video stream), and the video stream, which is the secondary video stream (secondary video stream), are read at the same time and fed to the decoder in order to play PiP, the primary and secondary video streams are targets for checking for bit limit.

Точнее говоря, в то время как окно сдвигается по временной оси ATC, поток, имеющий наивысшую рассчитанную битовую скорость, выбирается на каждой координате временной оси ATC, указанной посредством ATS, по каждому типу первичного видеопотока, вторичного видеопотока, многочисленных первичных аудиопотоков, многочисленных вторичных аудиопотоков, многочисленных потоков PG и многочисленных потоков IG. Наивысшая битовая скорость первичного видеопотока, наивысшая битовая скорость вторичного видеопотока, наивысшая битовая скорость первичного аудиопотока, наивысшая битовая скорость вторичного аудиопотока, наивысшая битовая скорость потока PG и наивысшая битовая скорость потока IG суммируются, и производится оценка, является ли итоговой суммой 48 Мбит или меньше.More specifically, while the window is shifted along the ATC time axis, the stream having the highest calculated bit rate is selected on each coordinate of the ATC time axis indicated by the ATS, for each type of primary video stream, secondary video stream, multiple primary audio streams, multiple secondary audio streams , multiple PG streams and multiple IG streams. The highest bit rate of the primary video stream, the highest bit rate of the secondary video stream, the highest bit rate of the primary audio stream, the highest bit rate of the secondary audio stream, the highest bit rate of the PG stream and the highest bit rate of the IG stream are summed, and it is judged whether the total amount is 48 Mbps or less.

Таким образом, согласно настоящему варианту осуществления гарантируется, что количество бит в секунду не превышает предопределенного верхнего предела, даже когда первичные и вторичные видеопотоки одновременно считываются как из BD-ROM, так и локального запоминающего устройства, и подаются в соответственные декодеры. При такой гарантии приложение PiP может создаваться рационально.Thus, according to the present embodiment, it is guaranteed that the number of bits per second does not exceed a predetermined upper limit, even when primary and secondary video streams are simultaneously read from both the BD-ROM and the local storage device and supplied to respective decoders. With such a guarantee, a PiP application can be created rationally.

(Дополнительные примечания)(Additional notes)

Был описан наилучший вариант для осуществления изобретения, насколько известно заявителю, в момент заполнения настоящей заявки. Однако дополнительные усовершенствования или модификации могут быть произведены над настоящим изобретением исходя из последующих технических вопросов. Здесь должно быть отмечено, что производить или нет такие усовершенствования или модификации является необязательным и зависит от средства реализации изобретения.The best option for carrying out the invention has been described, as far as the applicant knows, at the time of filling out this application. However, further improvements or modifications may be made to the present invention based on the following technical issues. It should be noted here that to make or not such improvements or modifications is optional and depends on the means of implementation of the invention.

(Момент времени начала (In_Time), момент времени окончания (Out_Time))(Start time (In_Time), end time (Out_Time))

На фиг.27 последний блок представления видео из TS1 выбран для момента времени окончания (Out_Time) предыдущего элемента воспроизведения, тогда как первый блок представления видео из TS2 выбран для момента времени начала (In_Times) предыдущего элемента воспроизведения и предыдущего элемента вспомогательного воспроизведения. Взамен, однако, промежуточный блок представления видео в TS1 может выбираться для момента времени окончания (Out_Time) предыдущего элемента воспроизведения наряду с тем, что промежуточный блок представления видео в TS2 может выбираться для моментов времени начала (In_Time) текущего элемента воспроизведения и текущего элемента вспомогательного воспроизведения. В этом случае безразрывные соединения не могут быть реализованы для текущего элемента воспроизведения и текущего элемента вспомогательного воспроизведения, и они должны соединяться с использованием CC=1 и SP_CC=1.27, the last video presentation block from TS1 is selected for the end time point (Out_Time) of the previous playitem, while the first video presentation block from TS2 is selected for the start time (In_Times) of the previous playitem and the previous sub-play element. Instead, however, the intermediate video presentation unit in TS1 can be selected for the end time point (Out_Time) of the previous playitem, while the intermediate video presentation unit in TS2 can be selected for the start time (In_Time) times of the current playitem and the current sub play item . In this case, seamless connections cannot be made for the current playitem and the current sub-playitem, and they must be connected using CC = 1 and SP_CC = 1.

(Вся информация списка воспроизведения)(All playlist information)

Когда требуется соединять два элемента воспроизведения при CC=5, вся информация об элементах воспроизведения и вся информация об элементах вспомогательного воспроизведения, которая принадлежит одной части информации списка воспроизведения, должна соединяться при CC=5.When it is required to connect two playitems at CC = 5, all information about playitems and all information about auxiliary playitems that belongs to one piece of playlist information must be connected at CC = 5.

(Объем данных, подаваемый в декодер)(The amount of data supplied to the decoder)

Что касается сверхуплотнения, объем данных, подаваемый в декодер, не всегда становится большим. Например, допустим случай, в котором первичный аудиопоток является основным клипом и состоит из DD (формата Dolby Digital) у CBR и MLP у VBR, и MLP замещается DD из CBR, поставляемого из локального запоминающего устройства. В этом случае объем данных, подаваемый в декодер, фактически уменьшается. Если случай очевиден, последовательность операций проверки может быть опущена.As for over-compaction, the amount of data supplied to the decoder does not always become large. For example, let’s say the case where the primary audio stream is the main clip and consists of DD (Dolby Digital format) for CBR and MLP for VBR, and MLP is replaced with DD from CBR supplied from the local storage device. In this case, the amount of data supplied to the decoder is actually reduced. If the case is obvious, the verification process may be omitted.

(Разность времен воспроизведения)(Playback time difference)

Для того чтобы реализовать CC=5 и SP_CC=5, желательно, если бы разница во времени воспроизведения видео- и аудиопотоков в одном элементе воспроизведения была небольшой. Допустимой разницей могут быть: период времени, эквивалентный одному видеокадру (от 1/60 до 1/25 секунды); одна секунда или менее; период времени, соответствующий определенной доле полного периода воспроизведения (например, 1% или менее); или комбинация двух из этих. Это также верно для разницы во времени воспроизведения видео- и аудиопотоков в одном элементе вспомогательного воспроизведения.In order to implement CC = 5 and SP_CC = 5, it would be desirable if the difference in the playback time of video and audio streams in one playback element was small. The acceptable difference may be: a period of time equivalent to one video frame (from 1/60 to 1/25 of a second); one second or less; a period of time corresponding to a certain fraction of the total playback period (for example, 1% or less); or a combination of two of these. This is also true for the time difference between the playback of video and audio streams in one sub-play element.

В случае где два элементарных потока сохранены в одном PID, желательно, чтобы разность во времени воспроизведения двух потоков, сохраненных при одном и том же PID, была такой же или меньшей, чем минимальный блок воспроизведения (1 кадр) потока, имеющего более короткое время воспроизведения. Это условие может быть выполнено сохранением формата Dolby Digital (AC-3) и MLP (формата упаковки без потери меридиана) в одиночном элементарном потоке, а затем записью элементарного потока на BD-ROM.In the case where two elementary streams are stored in the same PID, it is desirable that the difference in the playback time of the two streams stored at the same PID is the same or less than the minimum playback unit (1 frame) of the stream having a shorter playback time . This condition can be met by storing the Dolby Digital (AC-3) and MLP (meridian-free packing format) formats in a single elementary stream, and then writing the elementary stream to a BD-ROM.

(Обработка дополнительных контентов)(Processing additional content)

Желательно производить начальную настройку устройства воспроизведения таким образом, что дополнительный контент, загруженный в локальное запоминающее устройство 200, будет автоматически удаляться, когда истекло несколько месяцев или несколько лет после загрузки.It is desirable to perform the initial setup of the playback device so that additional content downloaded to the local storage device 200 will be automatically deleted when several months or several years after loading have elapsed.

(Замена PID)(Replacing PID)

Когда реализовано приложение микширования аудио, PID используются для проведения различия между первичными и вторичными аудиопотоками; однако, когда используется MPEG2-PG, желательно делать id потока (stream_id) заголовков пакета PES отличными друг от друга.When an audio mixing application is implemented, PIDs are used to distinguish between primary and secondary audio streams; however, when using MPEG2-PG, it is desirable to make the stream id (stream_id) of the PES packet headers different from each other.

В дополнение, первичные и вторичные аудиопотоки должны различаться только на уровне системного потока, так что два аудиопотока могут различаться одним демультиплексором. В качестве альтернативы, перед мультиплексированием двух потоков PID одного из потоков могут заменяться на другие PID.In addition, the primary and secondary audio streams should only differ at the system stream level, so that two audio streams can be distinguished by one demultiplexer. Alternatively, before multiplexing two streams, the PIDs of one of the streams may be replaced by other PIDs.

(Предварительная загрузка)(Preload)

Желательно, чтобы предварительная загрузка аудиоданных (файла «sound.bdmv») для звука щелчка кнопкой выполнялась, когда загружается BD-ROM или когда переключается глава. Это происходит потому, что, если чтение файла sound.bdmv предпринимается во время воспроизведения AV-клипа, вызывается операция поиска оптической головки считывания информации для чтения файла, отличного от AV-клипа. С другой стороны, когда загружается BD-ROM или когда переключается глава, редко бывает, что продолжается воспроизведение AV-клипа. Поэтому посредством считывания файла sound.bdmv с такой привязкой времени возможно улучшить чувствительность устройства и затруднить вызов прерывания воспроизведения AV-клипа.Preferably, preloading the audio data (“sound.bdmv” file) for the sound of the click of a button is performed when the BD-ROM is loading or when the chapter is switched. This is because if reading the sound.bdmv file is attempted during the playback of the AV clip, the search operation of the optical pickup head for reading a file other than the AV clip is called. On the other hand, when a BD-ROM is loaded or when a chapter is switched, it rarely happens that the AV clip continues to play. Therefore, by reading the sound.bdmv file with such a time reference, it is possible to improve the sensitivity of the device and make it difficult to interrupt the playback of the AV clip.

(Платформа Java™)(Java ™ Platform)

Платформа Java™ может структурироваться полной установкой на устройстве воспроизведения по каждому варианту осуществления персонального базового профиля 2Micro_Edition (J2ME) Java™ (PBP 1.0) и спецификации глобально выполняемого MHP (GEM1.0.2) для пакетных аудиовизуальных целевых объектов, а затем устройство воспроизведения может быть побуждено выполнять приложение BD-J. Для выполнения приложения устройство воспроизведения может быть побуждено выполнять инфраструктуру сверхуплотнения.The Java ™ platform can be structured with a full installation on the playback device for each embodiment of the personal 2Micro_Edition (J2ME) Java ™ profile (PBP 1.0) profile and the globally executable MHP specification (GEM1.0.2) for batch audio-visual targets, and then the playback device can be prompted run the BD-J application. To run the application, the reproducing device may be prompted to execute a super-densification infrastructure.

(Глава)(Chapter)

Предпочтительно создать «диспетчер модулей» в устройстве воспроизведения, который выбирает главу согласно монтированию BD-ROM, пользовательской операции или состоянию устройства. Декодер в устройстве воспроизведения BD-ROM выполняет воспроизведение AV-клипа на основании информации списка воспроизведения согласно выбору главы «диспетчером модулей».It is preferable to create a “module manager” in the playback device, which selects a chapter according to the mounting of the BD-ROM, user operation or device status. The decoder in the BD-ROM playback device plays the AV clip based on the information of the playlist according to the selection of the "module manager" chapter.

Когда «диспетчер модулей» выбирает главу, диспетчер приложений выполняет сигнализацию с использованием таблицы управления приложениями (AMT), соответствующей предыдущей главе, и AMT, соответствующей текущей главе. Сигнализация предпринимает управление, которое завершает работу приложения, описанного в AMT предыдущей главы, но не описанного в AMT текущего, наряду с тем, что начинает работу приложения, не описанного в AMT предыдущей главы, но описанного в AMT текущей главы.When the “module manager” selects a chapter, the application manager makes an alarm using the application management table (AMT) corresponding to the previous chapter and AMT corresponding to the current chapter. The alarm takes control, which terminates the application described in AMT of the previous chapter, but not described in AMT of the current one, while it starts the application that is not described in AMT of the previous chapter, but described in AMT of the current chapter.

(Структура каталогов в локальном запоминающем устройстве)(Directory structure in local storage)

Отдельные области в локальном запоминающем устройстве, описанные в каждом варианте осуществления, предпочтительно создаются под каталогом, соответствующим корневому сертификату диска BD-ROM.The individual areas in the local storage described in each embodiment are preferably created under a directory corresponding to the root certificate of the BD-ROM.

Корневой сертификат диска является сертификатом корневого каталога, который распространяется службой корневых сертификатов и назначается на BD-ROM создателем BD-ROM. Корневой сертификат диска закодирован, например, в X.509 (стандарт шифрования данных). Спецификации X.509 были выпущены Международным консультативным комитетом по телеграфии и телефонии (CCITT) и описаны в CCITT Recommendation X.509 (1988), «The Directory - Authentification Framework» (X.509 рекомендации CCITT (1988 г.), «Каталог - инфраструктура аутентификации»).A root certificate is a root certificate that is distributed by the root certificate service and assigned to the BD-ROM by the creator of the BD-ROM. The root certificate of the disk is encoded, for example, in X.509 (data encryption standard). The X.509 specifications were issued by the International Telegraphy and Telephony Advisory Committee (CCITT) and are described in the CCITT Recommendation X.509 (1988), “The Directory - Authentification Framework” (X.509 CCITT Recommendations (1988), “Catalog - authentication infrastructure ").

В дополнение, предпочтительно, чтобы контенты, записанные на BD-ROM и локальном запоминающем устройстве, были закодированы с использованием системы контента расширенного доступа (AACS), информация подписи была прикреплена к ним, а авторизация использования была задана в файле полномочий.In addition, it is preferable that the contents recorded on the BD-ROM and the local storage device are encoded using an Advanced Content Access System (AACS), the signature information is attached to them, and the authorization of use is specified in the authorization file.

(Пакет программ, который должен быть установлен)(Software package to be installed)

Когда устройство воспроизведения BD-ROM реализовано в качестве платформы Java™, желательно установить следующее расширение BD-J на устройство воспроизведения. Расширение BD-J включает в себя различные пакеты программ, специализированные для предоставления функций сверх GEM [1.0.2] для платформы Java™. Пакеты программ, включенные в расширение BD-J, показаны ниже.When the BD-ROM playback device is implemented as a Java ™ platform, it is desirable to install the following BD-J extension on the playback device. The BD-J extension includes various software packages specialized for providing functions beyond GEM [1.0.2] for the Java ™ platform. The software packages included in the BD-J extension are shown below.

- org.bluray.media- org.bluray.media

Этот пакет программ предоставляет специальные функции, которые должны добавляться к аудиовизуальной инфраструктуре Java™. Управляющие элементы для выбора ракурса, аудио и субтитра, добавлены в пакет программ.This software package provides special features that must be added to the Java ™ audio-visual infrastructure. Controls for selecting angle, audio and subtitle are added to the software package.

- org.bluray.ti- org.bluray.ti

Этот пакет программ включает в себя: API (интерфейс прикладного программирования) для отображения «служб» GEM [1.0.2] на «главу»; механизм для наведения справок об информации главы из BD-ROM и механизм для выбора новой главы.This software package includes: API (application programming interface) for mapping GEM "services" [1.0.2] to a "chapter"; a mechanism for inquiring about chapter information from the BD-ROM; and a mechanism for selecting a new chapter.

- org.bluray.application- org.bluray.application

Этот пакет программ включает в себя API для управления активными периодами приложения. В дополнение, пакет программ включает в себя API для наведения справок об информации, требуемой для сигнализации, когда выполняется приложение.This software package includes an API for managing active periods of the application. In addition, the software package includes an API for inquiring about the information required to signal when the application is running.

- org.bluray.ui- org.bluray.ui

Этот пакет программ включает в себя классы, которые определяют константы, используемые для ключевых событий, специализированных для BD-ROM, и осуществляют синхронизацию с воспроизведением видео.This software package includes classes that define the constants used for key events specialized for the BD-ROM, and synchronize with video playback.

- org.bluray.vfs- org.bluray.vfs

Этот пакет программ предоставляет механизм (схему связывания) для связывания контентов, записанных на BD-ROM (контентов на диске), и контентов в локальном запоминающем устройстве (контентов вне диска), которые не записаны на BD-ROM, для того чтобы воспроизводить данные безразрывным образом, безразлично к тому, где записаны данные.This software package provides a mechanism (linking scheme) for linking contents recorded on a BD-ROM (contents on a disk) and contents on a local storage device (contents off the disk) that are not recorded on a BD-ROM in order to reproduce data without interruption in a way that doesn't care where the data is written.

Схема связывания ассоциативно связывает контенты на BD-ROM (AV-клип, субтитр и приложение BD-J) с родственными контентами в локальном запоминающем устройстве. Схема связывания реализует безразрывное воспроизведение безразлично к тому, где записаны контенты.The linking scheme associates the contents on the BD-ROM (AV clip, subtitle and BD-J application) with related contents in the local storage device. The linking scheme implements non-stop playback indifferent to where the contents are recorded.

(Виртуальный пакет программ)(Virtual software package)

Устройство воспроизведения BD-ROM может быть побуждено выполнять последовательность операций, создающую виртуальный пакет программ. Это осуществляется тем, что устройство воспроизведения создает информацию о виртуальном пакете программ. Информация о виртуальном пакете программ является информацией, полученной расширением информации управления томом на BD-ROM. Здесь информация управления томом является информацией, которая задает структуру каталогов и файлов, существующую на носителе записи, и состоит из информации управления каталогами, имеющей отношение к каталогам, и информации управления файлами, имеющей отношение к файлам. Информация о виртуальном пакете программ предназначена для расширения структуры каталогов и файлов BD-ROM добавлением новой информации управления файлами в информацию управления томом, показывающую структуру каталогов и файлов BD-ROM.The BD-ROM playback device may be prompted to perform a series of operations creating a virtual software package. This is done by the fact that the playback device creates information about the virtual software package. Virtual package information is information obtained by expanding volume management information on a BD-ROM. Here, the volume management information is information that defines the directory and file structure existing on the recording medium and consists of directory management information related to directories and file management information related to files. Information about the virtual software package is intended to expand the directory structure and BD-ROM files by adding new file management information to the volume management information showing the directory structure and BD-ROM files.

(Реализация управляющей процедуры)(Implementation of the control procedure)

Как управляющие процедуры, поясненные в вышеупомянутых вариантах осуществления с использованием блок-схем последовательностей операций способов, так и управляющие процедуры, разъясненные в вышеописанных вариантах осуществления, удовлетворяют требованиям «изобретения программы», так как вышеупомянутые управляющие процедуры реализуются с конкретным использованием аппаратных ресурсов и являются созданием технической идеи с использованием естественного права.Both the control procedures explained in the above embodiments using flowcharts and the control procedures explained in the above embodiments satisfy the requirements of the “invention of the program” since the above control procedures are implemented using the specific use of hardware resources and are the creation of technical ideas using natural law.

- Изготовление программы по настоящему изобретению- Production program of the present invention

Программа по настоящему изобретению является объектной программой, которая может выполняться на компьютере. Объектная программа состоит из одной или более управляющих программ, которые побуждают компьютер выполнять каждый этап в блок-схеме последовательности операций способа или каждой процедуре функциональных компонентов. Есть различные типы управляющих программ, такие как собственный код процессора и байтовый код JAVA™. Также есть различные формы реализации этапов управляющих программ. Например, когда каждый этап может быть осуществлен посредством использования внешней функции, операторы вызова для вызова внешних функций используются в качестве управляющих программ. Управляющие программы, которые выполняют один этап, могут принадлежать к разным объектным программам. В RISC-процессоре (с сокращенным набором команд), в котором типы инструкций ограничены, каждый этап по блок-схемам последовательностей операций способов может быть осуществлен комбинированием инструкций арифметических операций, инструкций логических операций, инструкций ветвления и тому подобных.The program of the present invention is an object program that can be executed on a computer. An object program consists of one or more control programs that cause a computer to perform each step in a flowchart of a method or each procedure of functional components. There are various types of control programs, such as native processor code and JAVA ™ byte code. There are also various forms of implementation of the stages of control programs. For example, when each step can be implemented by using an external function, call operators to call external functions are used as control programs. Control programs that perform one step may belong to different object programs. In a RISC processor (with a reduced instruction set) in which instruction types are limited, each step in the flowcharts of the sequence of operations of the methods can be carried out by combining arithmetic instructions, logical instructions, branch instructions, and the like.

Программа по настоящему изобретению может быть произведена, как изложено ниже. Сначала разработчик программного обеспечения пишет с использованием языка программирования исходную программу, которая успешно выполняет каждую блок-схему последовательности операций способа и функциональный компонент. При этом написании разработчик программного обеспечения использует структуру классов, переменные, переменные типа «массив», вызовы внешних функций и так далее, которые подчиняются правилам структуры предложений языка программирования, который он/она использует.The program of the present invention can be produced as follows. First, a software developer writes an initial program using a programming language that successfully executes each flowchart of a method and a functional component. In this writing, the software developer uses the class structure, variables, variables of the "array" type, calls to external functions, and so on, which obey the rules of the sentence structure of the programming language that he / she uses.

Написанная исходная программа отправляется в компилятор в виде файлов. Компилятор транслирует исходную программу и формирует объектную программу.The written source program is sent to the compiler as files. The compiler translates the source program and generates an object program.

Трансляция, выполняемая компилятором, включает в себя последовательности операций, такие как анализ структуры предложений, оптимизация, распределение ресурсов и формирование кода. При анализе структуры предложений, символы и фразы, структура предложений и смысл исходной программы анализируются, а исходная программа преобразуется в промежуточную программу. При оптимизации промежуточная программа подвергается таким последовательностям операций, как настройка базовых элементов, анализ потока управления и анализ потока данных. При распределении ресурсов для адаптации к наборам команд целевого процессора переменные в промежуточной программе распределяются по регистрам или памяти целевого процессора. При формировании кода каждая промежуточная инструкция в промежуточной программе преобразуется в управляющую программу и получается объектная программа.Translation performed by the compiler includes a series of operations, such as analysis of the structure of sentences, optimization, resource allocation, and code generation. When analyzing the structure of sentences, symbols and phrases, the structure of sentences and the meaning of the original program are analyzed, and the original program is converted into an intermediate program. During optimization, the middleware undergoes such sequences of operations as tuning basic elements, analyzing the control flow, and analyzing the data flow. When allocating resources to adapt to the instruction sets of the target processor, variables in the middleware are allocated to the registers or memory of the target processor. When generating the code, each intermediate instruction in the intermediate program is converted into a control program and an object program is obtained.

После того как сформирована объектная программа, программист активизирует компоновщик. Компоновщик выделяет пространства памяти объектным программам и связанным библиотечным программам, и связывает их вместе, чтобы сформировать загрузочный модуль. Сформированный загрузочный модуль основан на допущении, что он считывается компьютером и побуждает компьютер выполнять процедуры, указанные в блок-схемах последовательностей операций способов, и процедуры функциональных компонентов. Программа по настоящему изобретению может быть создана этим способом.After the object program is formed, the programmer activates the linker. The linker allocates memory spaces to object programs and related library programs, and links them together to form a boot module. The generated boot module is based on the assumption that it is read by the computer and prompts the computer to perform the procedures indicated in the flowcharts of the sequence of operations of the methods and the procedures of the functional components. The program of the present invention can be created in this way.

Программа по настоящему изобретению может использоваться, как изложено ниже. Когда программа по настоящему изобретению используется в качестве встроенной программы, загрузочный модуль в качестве программы записывается в ПЗУ инструкций вместе с программой базовой системы ввода/вывода (BIOS) и различными частями связующего программного обеспечения (операционных систем). Программа по настоящему изобретению используется в качестве программы управления устройством 300 воспроизведения, в то время как ПЗУ инструкций встроено в модуль управления, и выполняется посредством ЦП.The program of the present invention can be used as described below. When the program of the present invention is used as an embedded program, the boot module as a program is written to the instruction ROM together with the basic input / output system (BIOS) program and various pieces of middleware (operating systems). The program of the present invention is used as a control program of the playback device 300, while the instruction ROM is integrated in the control module, and is executed by the CPU.

Когда устройство воспроизведения является моделью программы самозагрузки, программа базовой системы ввода/вывода (BIOS) встроена в ПЗУ инструкций, а различные части связующего программного обеспечения (операционных систем) предварительно установлены на жесткий диск. К тому же загрузочное ПЗУ для активизации системы с жесткого диска предусмотрено в устройстве воспроизведения. В этом случае только загрузочный модуль поставляется в устройство воспроизведения через переносной носитель записи и/или сеть и устанавливается на жестком диске в виде одного приложения. Это дает устройству воспроизведения возможность выполнять самозагрузку посредством загрузочного ПЗУ, чтобы активизировать операционную систему, а затем побуждает ЦП выполнять установленный загрузочный модуль в качестве одного приложения, так что может использоваться программа по настоящей заявке.When the playback device is a model of the boot program, the basic input / output system (BIOS) program is built into the ROM of the instructions, and various parts of the middleware (operating systems) are pre-installed on the hard drive. In addition, a boot ROM to activate the system from the hard disk is provided in the playback device. In this case, only the boot module is supplied to the playback device through a portable recording medium and / or network and is installed on the hard disk as a single application. This enables the playback device to boot through the boot ROM to activate the operating system, and then prompts the CPU to execute the installed boot module as a single application, so that the program of this application can be used.

Как описано выше, когда устройство воспроизведения является моделью жесткого диска, программа по настоящему изобретению может использоваться в качестве одного приложения. Соответственно, программу по настоящему изобретению возможно переносить, одалживать на время или поставлять отдельно через сеть.As described above, when the playback device is a model of a hard disk, the program of the present invention can be used as a single application. Accordingly, the program of the present invention can be transferred, borrowed on time or delivered separately through the network.

(Контроллер 22)(Controller 22)

Контроллер 22 может быть реализован в виде одной системной БИС.The controller 22 may be implemented as a single system LSI.

Системная БИС получается реализацией бескорпусной интегральной схемы на подложке высокой плотности и монтажом их в корпусе. Системная БИС также получается реализацией множества бескорпусных интегральных схем на подложке высокой плотности и монтажом их в корпусе, так что множество бескорпусных интегральных схем имеет внешний вид одной БИС (такая системная БИС названа многокристальным модулем).System LSI is obtained by implementing a packageless integrated circuit on a high-density substrate and mounting them in a housing. A system LSI is also obtained by implementing a number of open-circuit integrated circuits on a high-density substrate and mounting them in a housing, so that many open-circuit integrated circuits have the appearance of a single LSI (such a system LSI is called a multi-chip module).

Системная БИС имеет тип QFP (квадратного плоского корпуса) и тип PGA (корпуса с матричным расположением штырьковых выводов). В системной БИС типа QFP контакты прикреплены к четырем сторонам корпуса. В системной БИС типа PGA все из контактов прикреплены к целостной нижней части.System LSI has type QFP (square flat case) and type PGA (case with a matrix arrangement of pin terminals). In a QFP type system LSI, pins are attached to four sides of the chassis. In a PGA type system LSI, all of the pins are attached to a hollow bottom.

Эти контакты действуют в качестве связующего звена с другими схемами. Системная БИС, которая соединена с другими схемами через такие контакты в качестве связующего звена, играет роль в качестве ядра устройства воспроизведения.These contacts act as a link to other circuits. System LSI, which is connected to other circuits through such contacts as a connecting link, plays a role as the core of the playback device.

Каждая из бескорпусных интегральных схем, упакованных в системной БИС, состоит из: модуля входного каскада; модуля выходного каскада и модуля цифровой обработки. Модуль входного каскада оцифровывает аналоговый сигнал, тогда как модуль выходного каскада превращает полученные данные в аналоговую форму и выводит их.Each of the open-circuit integrated circuits packaged in the system LSI consists of: an input stage module; output stage module and digital processing module. The input stage module digitizes the analog signal, while the output stage module converts the received data into analog form and outputs it.

Каждый структурный элемент, показанный на схеме внутренней структуры в вышеприведенном варианте осуществления, установлен в блоке цифровой обработки.Each structural element shown in the internal structure diagram in the above embodiment is installed in the digital processing unit.

Как описано выше «используемым в качестве встроенной программы», загрузочный модуль в качестве программы, программа базовой системы ввода/вывода (BIOS) и различные части связующего программного обеспечения (операционных систем) записаны в ПЗУ инструкций. Наиболее важное усовершенствование вариантов осуществления достигается загрузочным модулем в качестве программы. Поэтому возможно изготавливать системную БИС по настоящему изобретению посредством монтажа в корпусе ПЗУ инструкций в качестве бескорпусных интегральных схем, в которых хранится загрузочный модуль в качестве программы, в виде бескорпусной интегральной схемы.As described above by “used as firmware”, the boot module as a program, the basic input / output system (BIOS) program, and various pieces of middleware (operating systems) are written in the instruction ROM. The most important improvement of the embodiments is achieved by the boot module as a program. Therefore, it is possible to manufacture the system LSI of the present invention by mounting instructions in the ROM case as open-circuit integrated circuits, in which the boot module is stored as a program, in the form of a open-circuit integrated circuit.

Желательно применять реализацию SoC или реализацию SiP для фактической реализации. Реализация SoC (системы на кристалле) является технологией, которая прожигает многочисленные схемы в одной интегральной схеме. Реализация SiP (системы в корпусе) является технологией, которая помещает многочисленные интегральные схемы в одном корпусе с использованием полимера. Посредством вышеприведенной процедуры системная БИС по настоящему изобретению может изготавливаться на основании схем внутренней структуры устройства воспроизведения, описанных в каждом варианте осуществления.It is advisable to use the SoC implementation or the SiP implementation for the actual implementation. The implementation of SoC (systems on a chip) is a technology that burns through multiple circuits in a single integrated circuit. Implementing SiP (systems in a package) is a technology that places multiple integrated circuits in a single package using polymer. By the above procedure, the system LSI of the present invention can be made based on the internal structure diagrams of the reproducing apparatus described in each embodiment.

Должно быть отмечено, что, хотя здесь используется термин БИС, он может называться ИС (интегральной схемой, IC), БИС, СБИС (сверхбольшой интегральной схемой, super LSI), УБИС (ультрабольшой интегральной схемой, ultra LSI) или тому подобным в зависимости от степени интеграции.It should be noted that, although the term LSI is used here, it can be called IC (integrated circuit, IC), LSI, VLSI (ultra-large integrated circuit, super LSI), UBIS (ultra-large integrated circuit, ultra LSI) or the like, depending on degree of integration.

Кроме того, часть или все из компонентов каждого устройства воспроизведения могут быть выполнены в виде одного кристалла. Интегральная схема не ограничена реализацией SoC или реализацией SiP, но может быть выполнена посредством специализированной схемы или процессора общего назначения. Также возможно выполнять интегральную схему посредством использования FPGA (программируемой пользователем вентильной матрицы), которая может быть перепрограммирована после ее изготовления, или переконфигурируемого процессора, который может переконфигурировать соединение и настройки ячеек схемы внутри БИС. Более того, технология для интегральной схемы, которая заменяет БИС, может появиться в недалеком будущем, по мере того как полупроводниковая технология совершенствуется или разветвляется в другие технологии. В таком случае новая технология может быть включена в интеграцию функциональных блоков, составляющих настоящее изобретение, как описано выше. Такие возможные технологии включают в себя биотехнологию.In addition, part or all of the components of each playback device can be made in the form of a single crystal. The integrated circuit is not limited to the implementation of SoC or the implementation of SiP, but can be performed using a specialized circuit or general-purpose processor. It is also possible to carry out an integrated circuit by using an FPGA (Field Programmable Gate Array), which can be reprogrammed after its manufacture, or a reconfigurable processor that can reconfigure the connection and settings of the circuit cells inside the LSI. Moreover, the technology for the integrated circuit, which replaces the LSI, may appear in the near future, as the semiconductor technology is improved or branched into other technologies. In this case, the new technology may be included in the integration of the functional blocks constituting the present invention, as described above. Such possible technologies include biotechnology.

Промышленная применимостьIndustrial applicability

Носитель записи и устройство воспроизведения по настоящему изобретению могут выпускаться серийно на основании их внутренних структур, показанных в вариантах осуществления, приведенных выше. По существу, носитель записи и устройство воспроизведения по настоящему изобретению обладают промышленной применимостью.The recording medium and playback device of the present invention can be produced in series based on their internal structures shown in the embodiments above. As such, the recording medium and reproducing apparatus of the present invention have industrial applicability.

Claims (5)

1. Устройство воспроизведения для воспроизведения в соответствии с информацией списка воспроизведения основного потока, в котором определена секция первичного воспроизведения, и вспомогательного потока, в котором определена секция вторичного воспроизведения, причем
информация списка воспроизведения определяет в отношении каждого из множества цифровых потоков секцию воспроизведения и включает в себя информацию о главном пути и информацию о вспомогательном пути,
информация о главном пути задает из числа множества цифровых потоков один цифровой поток в качестве основного потока и определяет секцию первичного воспроизведения в основном потоке,
информация о вспомогательном пути задает из числа оставшейся части упомянутого множества цифровых потоков один цифровой поток в качестве вспомогательного потока и определяет во вспомогательном потоке секцию вторичного воспроизведения, которая должна синхронизироваться с секцией первичного воспроизведения,
информация о главном пути дополнительно включает в себя таблицу потоков, показывающую по меньшей мере одну пару элементарных потоков, которым предоставлена возможность воспроизводиться одновременно, причем эта пара элементарных потоков является составленной из по меньшей мере одного из множества элементарных потоков, мультиплексированных в основной поток, и по меньшей мере одного из множества элементарных потоков, мультиплексированных во вспомогательный поток, каждый из основного потока и вспомогательного потока представляет собой последовательность пакетов транспортного потока (TS), в которой имеется множество пакетов TS, каждый из которых имеет присоединенную к нему временную метку поступления,
при этом устройство воспроизведения содержит
первый модуль считывания, выполненный с возможностью считывать среди пакетов TS в основном потоке, записанном на первый носитель записи, пакеты TS, составляющие секцию, соответствующую секции первичного воспроизведения, согласно информации о главном пути,
второй модуль считывания, выполненный с возможностью считывать среди пакетов TS во вспомогательном потоке, записанном на второй носитель записи, пакеты TS, составляющие секцию, соответствующую секции вторичного воспроизведения, согласно информации о вспомогательном пути,
первый и второй фильтры, выполненные с возможностью выбирать из числа пакетов TS, считанных первым и вторым модулями считывания, пакеты TS, которым предоставлена возможность воспроизводиться, в таблице номеров потоков, включенной в информацию списка воспроизведения, и
первое и второе средства депакетирования источника, выполненные с возможностью выдавать пакеты TS из первого и второго модулей считывания в первый и второй фильтры в момент времени, указанный временной меткой поступления, присоединенной к каждому их пакетов TS,
при этом суммарный объем данных упомянутой по меньшей мере одной пары элементарных потоков, которые представляют собой пакеты TS и которые должны воспроизводиться одновременно в единицу времени, является меньшим чем или равным предопределенному значению и
упомянутый суммарный объем данных, приходящийся на единицу времени, вычисляется в окне, которое представляет собой проверочный кадр на временной оси, выступающий в роли опорного для временных меток поступления, и этот суммарный объем данных является меньшим чем или равным упомянутому предопределенному значению независимо от того, в какой точке на временной оси находится упомянутое окно.
1. A playback device for reproducing in accordance with the information of the playlist of the main stream in which the primary playback section is determined, and the auxiliary stream in which the secondary playback section is determined, wherein
playlist information defines, with respect to each of the plurality of digital streams, a playback section and includes main path information and auxiliary path information,
information about the main path sets from among the number of digital streams one digital stream as the main stream and determines the primary playback section in the main stream,
the auxiliary path information sets, from among the remaining part of the plurality of digital streams, one digital stream as an auxiliary stream and determines in the auxiliary stream a secondary reproduction section to be synchronized with the primary reproduction section,
information about the main path further includes a table of streams showing at least one pair of elementary streams that are allowed to play simultaneously, moreover, this pair of elementary streams is composed of at least one of a plurality of elementary streams multiplexed into the main stream, and at least one of the many elementary streams multiplexed into the auxiliary stream, each of the main stream and the auxiliary stream is sequence of transport stream packets (TS), in which a plurality of packets TS, each of which has attached thereto a receipt timestamp,
wherein the playback device contains
a first reader module, configured to read among the TS packets in the main stream recorded on the first recording medium, TS packets constituting a section corresponding to the primary playback section according to the main path information,
a second reader module, configured to read among the TS packets in the auxiliary stream recorded on the second recording medium, TS packets constituting a section corresponding to the secondary reproduction section according to the auxiliary path information,
the first and second filters, configured to select from among the TS packets read by the first and second reading modules, the TS packets that are allowed to play in the stream number table included in the playlist information, and
the first and second source depacketting means, configured to issue TS packets from the first and second readout modules to the first and second filters at a time indicated by the timestamp of the receipt attached to each of their TS packets,
wherein the total data volume of said at least one pair of elementary streams, which are TS packets and which must be reproduced simultaneously per unit time, is less than or equal to a predetermined value and
said total amount of data per unit time is calculated in a window, which is a check frame on the time axis, acting as a reference for timestamps of receipt, and this total amount of data is less than or equal to said predetermined value regardless what point on the time axis is the window mentioned.
2. Устройство воспроизведения по п.1, в котором
первый носитель записи представляет собой оптический диск, предназначенный только для чтения, а второй носитель записи представляет собой перезаписываемый носитель записи,
вспомогательный поток и информация списка воспроизведения записаны в предопределенную область на перезаписываемом носителе записи, причем эта предопределенная область связана с оптическим диском, предназначенным только для чтения, в целях создания в комбинации с ним виртуального контейнера данных,
при этом первый и второй модули считывания одновременно считывают пакеты TS с оптического диска, предназначенного только для чтения, и пакеты TS с перезаписываемого носителя записи.
2. The playback device according to claim 1, in which
the first recording medium is a read-only optical disc, and the second recording medium is a rewritable recording medium,
the auxiliary stream and playlist information are recorded in a predetermined area on a rewritable recording medium, and this predetermined area is connected to a read-only optical disk in order to create a virtual data container in combination with it,
wherein the first and second read modules simultaneously read the TS packets from a read-only optical disc and the TS packets from a rewritable recording medium.
3. Устройство воспроизведения по п.1, в котором по меньшей мере один из упомянутого множества пакетов TS, составляющих вспомогательный поток, перекрывается на временной оси с по меньшей мере одним из упомянутого множества пакетов TS, составляющих основной поток,
причем пакеты TS с первого и второго средств депакетирования источника одновременно выдаются на первый и второй фильтры в момент, соответствующий координате временной оси, указанной каждой из временных меток поступления.
3. The playback device according to claim 1, in which at least one of said plurality of TS packets constituting an auxiliary stream overlaps on the time axis with at least one of said plurality of TS packets constituting the main stream,
moreover, TS packets from the first and second source de-packaging means are simultaneously issued to the first and second filters at the moment corresponding to the coordinate of the time axis indicated by each of the arrival timestamps.
4. Устройство воспроизведения по п.1, в котором каждый из основного потока и вспомогательного потока записан после того, как его битовая скорость проверена по координатам, указанным упомянутым множеством временных меток поступления,
исходное состояние этой проверки соответствует тому, где находится начальная точка упомянутого окна в момент времени, указанный временной меткой поступления, присоединенной к первому пакету TS из упомянутого множества пакетов TS, составляющих основной поток и вспомогательный поток,
конечное состояние этой проверки соответствует тому, где конечная точка упомянутого окна достигла момента времени, указанного временной меткой поступления, присоединенной к последнему пакету TS из упомянутого множества пакетов TS, составляющих основной поток и вспомогательный поток,
при этом упомянутая проверка представляет собой процесс проверки того, что суммарный размер пакетов TS, включенных в упомянутое окно, меньше чем или равен упомянутому предопределенному значению, при сдвигании координат упомянутой начальной точки и упомянутой конечной точки по координатам, указанным упомянутым множеством временных меток поступления, между упомянутым начальным состоянием и упомянутым конечным состоянием.
4. The playback device according to claim 1, in which each of the main stream and the auxiliary stream is recorded after its bit rate is checked at the coordinates indicated by the aforementioned set of time stamps of receipt,
the initial state of this check corresponds to where the starting point of the said window is located at the time indicated by the arrival time stamp attached to the first TS packet from the plurality of TS packets constituting the main stream and the auxiliary stream,
the final state of this check corresponds to where the end point of the said window has reached the point in time indicated by the arrival time stamp attached to the last TS packet from the plurality of TS packets constituting the main stream and the auxiliary stream,
wherein said verification is a process of verifying that the total size of TS packets included in said window is less than or equal to said predetermined value when shifting the coordinates of said starting point and said ending point at coordinates indicated by said plurality of arrival time marks between said initial state and said final state.
5. Устройство воспроизведения по п.1, в котором суммарный размер пакетов TS вычисляется посредством суммирования наивысших битовых скоростей пакетов TS, причем каждая из этих наивысших битовых скоростей выбирается среди битовых скоростей пакетов TS, составляющих каждый из упомянутых элементарных потоков, которым предоставлена возможность воспроизводиться одновременно, в таблице номеров потоков. 5. The playback device according to claim 1, in which the total size of the TS packets is calculated by summing the highest bit rates of the TS packets, each of these highest bit rates being selected among the bit rates of the TS packets constituting each of these elementary streams that are allowed to play simultaneously in the stream number table.
RU2007141173/28A 2005-04-07 2006-04-07 Player RU2415483C2 (en)

Applications Claiming Priority (8)

Application Number Priority Date Filing Date Title
JP2005-111425 2005-04-07
JP2005-111429 2005-04-07
JP2005111428 2005-04-07
JP2005-111428 2005-04-07
JP2005111425 2005-04-07
JP2005-111427 2005-04-07
JP2005-111426 2005-04-07
JP2005111426 2005-04-07

Related Child Applications (1)

Application Number Title Priority Date Filing Date
RU2010139229/28A Division RU2010139229A (en) 2005-04-07 2010-09-23 RECORDING MEDIA, PLAYBACK DEVICE, RECORDING METHOD AND PLAYBACK METHOD

Publications (2)

Publication Number Publication Date
RU2007141173A RU2007141173A (en) 2009-05-20
RU2415483C2 true RU2415483C2 (en) 2011-03-27

Family

ID=41021207

Family Applications (2)

Application Number Title Priority Date Filing Date
RU2007141173/28A RU2415483C2 (en) 2005-04-07 2006-04-07 Player
RU2010139229/28A RU2010139229A (en) 2005-04-07 2010-09-23 RECORDING MEDIA, PLAYBACK DEVICE, RECORDING METHOD AND PLAYBACK METHOD

Family Applications After (1)

Application Number Title Priority Date Filing Date
RU2010139229/28A RU2010139229A (en) 2005-04-07 2010-09-23 RECORDING MEDIA, PLAYBACK DEVICE, RECORDING METHOD AND PLAYBACK METHOD

Country Status (1)

Country Link
RU (2) RU2415483C2 (en)

Also Published As

Publication number Publication date
RU2010139229A (en) 2012-03-27
RU2007141173A (en) 2009-05-20

Similar Documents

Publication Publication Date Title
EP1873773B1 (en) Recording medium, reproducing device, recording method and reproducing method
US8452165B2 (en) Recording medium, playback apparatus, method and program
CN105765657A (en) Recording medium, playback device, and playback method
CN101156209B (en) Recording medium, reproducing device, recording method, and reproducing method
RU2415483C2 (en) Player