JP6466258B2 - REPRODUCTION DEVICE, REPRODUCTION METHOD, AND RECORDING MEDIUM - Google Patents

REPRODUCTION DEVICE, REPRODUCTION METHOD, AND RECORDING MEDIUM Download PDF

Info

Publication number
JP6466258B2
JP6466258B2 JP2015115045A JP2015115045A JP6466258B2 JP 6466258 B2 JP6466258 B2 JP 6466258B2 JP 2015115045 A JP2015115045 A JP 2015115045A JP 2015115045 A JP2015115045 A JP 2015115045A JP 6466258 B2 JP6466258 B2 JP 6466258B2
Authority
JP
Japan
Prior art keywords
information
video stream
video
luminance
event
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015115045A
Other languages
Japanese (ja)
Other versions
JP2016039627A (en
Inventor
洋 矢羽田
洋 矢羽田
遠間 正真
正真 遠間
智輝 小川
智輝 小川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Corp of America
Original Assignee
Panasonic Intellectual Property Corp of America
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Corp of America filed Critical Panasonic Intellectual Property Corp of America
Priority to EP21194019.2A priority Critical patent/EP3944241A3/en
Priority to PCT/JP2015/003547 priority patent/WO2016021120A1/en
Priority to EP15829514.7A priority patent/EP3107100B1/en
Priority to CN201580001920.8A priority patent/CN105580081B/en
Priority to CN202010088066.6A priority patent/CN111276170B/en
Publication of JP2016039627A publication Critical patent/JP2016039627A/en
Priority to US15/278,582 priority patent/US10255951B2/en
Priority to US16/251,688 priority patent/US10832737B2/en
Application granted granted Critical
Publication of JP6466258B2 publication Critical patent/JP6466258B2/en
Priority to JP2020108647A priority patent/JP6991279B2/en
Priority to US17/038,753 priority patent/US11335382B2/en
Priority to US17/038,708 priority patent/US11538502B2/en
Priority to JP2021129190A priority patent/JP7163461B2/en
Priority to US17/556,241 priority patent/US11908492B2/en
Priority to US17/556,227 priority patent/US11929102B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • G11B27/327Table of contents
    • G11B27/329Table of contents on a disc [VTOC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • H04N5/85Television signal recording using optical recording on discs or drums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/015High-definition television systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8233Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being a character code signal
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/20Disc-shaped record carriers
    • G11B2220/25Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537Optical discs
    • G11B2220/2541Blu-ray discs; Blue laser DVR discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/20Disc-shaped record carriers
    • G11B2220/25Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537Optical discs
    • G11B2220/2562DVDs [digital versatile discs]; Digital video discs; MMCDs; HDCDs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/98Adaptive-dynamic-range coding [ADRC]

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)

Description

本発明は、符号化された映像ストリームを再生する再生装置、再生方法および記録媒体に関するものである。   The present invention relates to a playback device, a playback method, and a recording medium for playing back an encoded video stream.

従来、DVDに関する技術が開示されている(例えば、特許文献1参照)。   Conventionally, a technique related to a DVD has been disclosed (for example, see Patent Document 1).

特開平9−282848号公報Japanese Patent Laid-Open No. 9-282848

しかしながら、上記特許文献では、更なる改善が必要とされていた。   However, in the above patent document, further improvement is required.

本発明の一態様に係る再生装置は、符号化された映像情報であるビデオストリームを記録媒体から読み出して再生する再生装置であって、前記ビデオストリームの輝度のダイナミックレンジが、第1のダイナミックレンジか、前記第1のダイナミックレンジよりも広い第2のダイナミックレンジかを示す第1の属性情報を、前記ビデオストリームに対応付けて前記記録媒体に記録されている管理情報ファイルから読み出す属性読み出し部と、前記ビデオストリームを前記記録媒体から読み出して復号することにより復号映像情報を生成する復号部と、読み出された前記第1の属性情報が第2のダイナミックレンジを示す場合、前記第2のダイナミックレンジに応じた前記ビデオストリームの最高輝度を示す最高輝度情報とともに、前記復号映像情報を出力する出力部とを備える。   A playback apparatus according to an aspect of the present invention is a playback apparatus that reads a video stream, which is encoded video information, from a recording medium and plays back the video stream. An attribute reading unit that reads first attribute information indicating whether the second dynamic range is wider than the first dynamic range from a management information file recorded on the recording medium in association with the video stream; A decoding unit that generates decoded video information by reading and decoding the video stream from the recording medium; and the second dynamic range when the read first attribute information indicates a second dynamic range. Along with the maximum luminance information indicating the maximum luminance of the video stream according to the range, the decoded video is displayed. And an output unit for outputting information.

上記態様によれば、更なる改善を実現することができる。   According to the said aspect, the further improvement is realizable.

SD−DVDの構造を示す図である。It is a figure which shows the structure of SD-DVD. AVデータであるMPEGストリーム中に埋め込まれているナビゲーション情報を説明する概要図である。It is a schematic diagram explaining the navigation information embedded in the MPEG stream which is AV data. DVDにおけるVOBの構成を示す概要図である。It is a schematic diagram which shows the structure of VOB in DVD. BD−ROMのデータ階層を示す図である。It is a figure which shows the data hierarchy of BD-ROM. BD−ROMに記録されている論理データの構造を示す図である。It is a figure which shows the structure of the logical data currently recorded on BD-ROM. BD−ROMを再生するBD−ROMプレーヤの基本的な構成の概要を示す図である。It is a figure which shows the outline | summary of the basic composition of the BD-ROM player which reproduces | regenerates BD-ROM. 図6に示すプレーヤの構成を詳細化したブロック図である。FIG. 7 is a block diagram showing a detailed configuration of the player shown in FIG. 6. BD−ROMのアプリケーション空間を示す図である。It is a figure which shows the application space of BD-ROM. MPEGストリーム(VOB)の構成を示す図である。It is a figure which shows the structure of an MPEG stream (VOB). MPEGストリームにおけるパックの構成を示す図である。It is a figure which shows the structure of the pack in an MPEG stream. AVデータとプレーヤ構成との関係を説明するための図である。It is a figure for demonstrating the relationship between AV data and a player structure. トラックバッファを使ったVOBデータ連続供給モデルを説明するための図である。It is a figure for demonstrating the VOB data continuous supply model using a track buffer. VOB管理情報ファイルの内部構造を示す図である。It is a figure which shows the internal structure of a VOB management information file. VOBU情報の詳細を説明するための図である。It is a figure for demonstrating the detail of VOBU information. タイムマップを使ったアドレス情報取得方法を説明するための図である。It is a figure for demonstrating the address information acquisition method using a time map. プレイリストの構成を示す図である。It is a figure which shows the structure of a play list. イベントハンドラテーブルの構成を示す図である。It is a figure which shows the structure of an event handler table. BD−ROM全体情報であるBD.INFOの構成を示す図である。BD.ROM is the entire BD-ROM information. It is a figure which shows the structure of INFO. グローバルイベントハンドラテーブルの構成を示す図である。It is a figure which shows the structure of a global event handler table. タイムイベントの例を示す図である。It is a figure which shows the example of a time event. ユーザのメニュー操作によるユーザイベントの例を示す図である。It is a figure which shows the example of the user event by a user's menu operation. グローバルイベントの例を示す図である。It is a figure which shows the example of a global event. プログラムプロセッサの機能的な構成を説明するための図である。It is a figure for demonstrating the functional structure of a program processor. システムパラメータ(SPRM)の一覧を示す図である。It is a figure which shows the list of a system parameter (SPRM). 2つの選択ボタンを持つメニュー画面の制御に係るイベントハンドラにおけるプログラムの例を示す図である。It is a figure which shows the example of the program in the event handler which concerns on control of the menu screen which has two selection buttons. メニュー選択のユーザイベントに係るイベントハンドラにおけるプログラムの例を示す図である。It is a figure which shows the example of the program in the event handler which concerns on the user event of menu selection. BD−ROMプレーヤにおけるAVデータ再生の基本処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the basic process of AV data reproduction in a BD-ROM player. BD−ROMプレーヤにおけるプレイリスト再生開始からVOB再生終了までの処理の流れを示すフローチャートである。It is a flowchart which shows the flow of a process from the play list reproduction start in a BD-ROM player to the end of VOB reproduction | regeneration. 図29の(A)は、BD−ROMプレーヤにおけるタイムイベントに係る処理の流れを示すフローチャートであり、図29の(B)は、BD−ROMプレーヤにおけるユーザイベントに係る処理の流れを示すフローチャートである。FIG. 29A is a flowchart showing a process flow related to a time event in the BD-ROM player, and FIG. 29B is a flowchart showing a process flow related to a user event in the BD-ROM player. is there. BD−ROMプレーヤにおける字幕データの処理の流れを示すフローチャートである。It is a flowchart which shows the flow of a process of subtitle data in a BD-ROM player. NALユニットの並びを説明する図である。It is a figure explaining the arrangement | sequence of a NAL unit. HDRビデオストリームのMPEG−2 TS多重化例を説明する図である。It is a figure explaining the MPEG-2 TS multiplexing example of a HDR video stream. HDRビデオストリームのMPEG−2 TS多重化例を説明する図である。It is a figure explaining the MPEG-2 TS multiplexing example of a HDR video stream. HDRビデオストリームのMPEG−2 TS多重化例を説明する図である。It is a figure explaining the MPEG-2 TS multiplexing example of a HDR video stream. HDRビデオストリームのMPEG−2 TS多重化例を説明する図である。It is a figure explaining the MPEG-2 TS multiplexing example of a HDR video stream. HDRビデオストリームのMPEG−2 TS多重化例を説明する図である。It is a figure explaining the MPEG-2 TS multiplexing example of a HDR video stream. HDRビデオストリームのMPEG−2 TS多重化例を説明する図である。It is a figure explaining the MPEG-2 TS multiplexing example of a HDR video stream. HDRビデオストリームのMPEG−2 TS多重化例を説明する図である。It is a figure explaining the MPEG-2 TS multiplexing example of a HDR video stream. HDRビデオストリームの管理情報を説明する図である。It is a figure explaining the management information of a HDR video stream. HDRビデオストリームのデコーダモデルを説明する図である。It is a figure explaining the decoder model of a HDR video stream. 再生装置の構成の一例を示すブロック図である。It is a block diagram which shows an example of a structure of a reproducing | regenerating apparatus. 再生方法の一例を示すフローチャートである。It is a flowchart which shows an example of the reproduction | regeneration method.

(本発明の基礎となった知見)
本発明者は、「背景技術」の欄において記載した技術に関して課題が生じることを見出した。その課題について、以下、詳細に説明する。
(Knowledge that became the basis of the present invention)
The present inventor has found that problems arise with respect to the technique described in the “Background Art” column. This problem will be described in detail below.

映像データを記録した情報記録媒体の代表格は、DVD(以下、「Standard Difinition(SD)−DVD」ともいう。)である。以下に従来のDVDについて説明する。   A typical information recording medium on which video data is recorded is a DVD (hereinafter also referred to as “Standard Definition (SD) -DVD”). A conventional DVD will be described below.

図1は、SD−DVDの構造を示す図である。図1の下段に示すように、DVDディスク上にはリードインからリードアウトまでの間に論理アドレス空間が設けられている。その論理アドレス空間には先頭からファイルシステムのボリューム情報が記録され、続いて映像音声などのアプリケーションデータが記録されている。   FIG. 1 is a diagram showing the structure of an SD-DVD. As shown in the lower part of FIG. 1, a logical address space is provided on the DVD disk from lead-in to lead-out. In the logical address space, volume information of the file system is recorded from the head, and subsequently application data such as video and audio is recorded.

ファイルシステムとは、ISO9660やUniversal Disc Format(UDF)等の規格により定められたデータを管理する仕組みのことであり、ディスク上のデータをディレクトリまたはファイルと呼ばれる単位で表現する仕組みである。   A file system is a mechanism for managing data defined by standards such as ISO9660 and Universal Disc Format (UDF), and is a mechanism for expressing data on a disk in units called directories or files.

日常使っているパーソナルコンピュータ(PC)の場合でも、File Allocation Tables(FAT)またはNT File System(NTFS)と呼ばれるファイルシステムにより、ディレクトリやファイルという構造でハードディスクに記録されたデータがコンピュータ上で表現され、ユーザビリティを高めている。   Even in the case of a personal computer (PC) that is used everyday, the data recorded on the hard disk in a directory or file structure is represented on the computer by a file system called File Allocation Tables (FAT) or NT File System (NTFS). , Enhance usability.

SD−DVDの場合、UDF及びISO9660の両方のファイルシステムが使用されている。両方を合わせて「UDFブリッジ」とも呼ばれる。記録されているデータはUDFまたはISO9660どちらのファイルシステムドライバによってもデータの読み出しができるようになっている。なお、ここで取り扱うDVDはパッケージメディア用のROMディスクであり、物理的に書き込みが不可能である。   In the case of SD-DVD, both UDF and ISO9660 file systems are used. Together, they are also called “UDF bridges”. The recorded data can be read out by either UDF or ISO9660 file system driver. The DVD handled here is a ROM disk for package media and cannot be physically written.

DVD上に記録されたデータは、UDFブリッジを通して、図1左上に示すようなディレクトリまたはファイルとして見ることができる。ルートディレクトリ(図1における「ROOT」)の直下に「VIDEO_TS」と呼ばれるディレクトリが置かれ、ここにDVDのアプリケーションデータが記録されている。アプリケーションデータは、複数のファイルとして記録され、主なファイルとして以下の種類のファイルがある。   Data recorded on the DVD can be viewed as a directory or file as shown in the upper left of FIG. 1 through the UDF bridge. A directory called “VIDEO_TS” is placed directly under the root directory (“ROOT” in FIG. 1), and DVD application data is recorded therein. Application data is recorded as a plurality of files, and there are the following types of files as main files.

VIDEO_TS.IFO ディスク再生制御情報ファイル
VTS_01_0.IFO ビデオタイトルセット#1再生制御情報ファイル
VTS_01_0.VOB ビデオタイトルセット#1ストリームファイル
.....
VIDEO_TS. IFO disc playback control information file VTS_01_0. IFO video title set # 1 playback control information file VTS_01_0. VOB video title set # 1 stream file
.....

上記例に示すように2つの拡張子が規定されている。「IFO」は再生制御情報が記録されたファイルであることを示す拡張子であり、「VOB」はAVデータであるMPEGストリームが記録されたファイルであることを示す拡張子である。   As shown in the above example, two extensions are defined. “IFO” is an extension indicating that the reproduction control information is recorded, and “VOB” is an extension indicating that the MPEG stream that is AV data is recorded.

再生制御情報とは、DVDで採用されたインタラクティビティ(ユーザの操作に応じて再生を動的に変化させる技術)を実現するための情報や、メタデータのような、AVデータに付属する情報などのことである。また、DVDでは一般的に再生制御情報のことをナビゲーション情報と呼ぶことがある。   The playback control information is information for realizing interactivity (technique for dynamically changing playback according to a user operation) adopted by DVD, information attached to AV data such as metadata, and the like. That is. In DVD, generally, reproduction control information is sometimes referred to as navigation information.

再生制御情報ファイルは、ディスク全体を管理する「VIDEO_TS.IFO」と、個々のビデオタイトルセット毎の再生制御情報である「VTS_01_0.IFO」がある。なお、DVDでは複数のタイトル、言い換えれば複数の異なる映画や楽曲を1枚のディスクに記録することが可能である。   The playback control information file includes “VIDEO_TS.IFO” for managing the entire disc and “VTS — 01 — 0.IFO” which is playback control information for each video title set. A DVD can record a plurality of titles, in other words, a plurality of different movies and music pieces on a single disc.

ここで、ファイル名ボディにある「01」はビデオタイトルセットの番号を示しており、例えば、ビデオタイトルセット#2の場合は、「VTS_02_0.IFO」となる。   Here, “01” in the file name body indicates the number of the video title set. For example, in the case of the video title set # 2, “VTS — 02 — 0.IFO”.

図1の右上部は、DVDのアプリケーション層でのDVDナビゲーション空間であり、前述した再生制御情報が展開された論理構造空間である。「VIDEO_TS.IFO」内の情報は、VIDEO Manager Information(VMGI)として、「VTS_01_0.IFO」または、他のビデオタイトルセット毎に存在する再生制御情報はVideo Title Set Information(VTSI)としてDVDナビゲーション空間に展開される。   The upper right part of FIG. 1 is a DVD navigation space in the DVD application layer, which is a logical structure space in which the above-described reproduction control information is expanded. The information in “VIDEO_TS.IFO” is stored in the DVD navigation space as VIDEO Manager Information (VMGI) as “VTS — 01 — 0.IFO”, or the playback control information existing for each other video title set as Video Title Set Information (VTSI). Be expanded.

VTSIの中にはProgram Chain(PGC)と呼ばれる再生シーケンスの情報であるProgram Chain Information(PGCI)が記述されている。PGCIは、Cellの集合とコマンドと呼ばれる一種のプログラミング情報によって構成されている。   In VTSI, Program Chain Information (PGCI) that is information of a reproduction sequence called Program Chain (PGC) is described. The PGCI is composed of a set of cells and a kind of programming information called a command.

Cell自身はVOB(Video Objectの略であり、MPEGストリームを指す)の一部区間または全部区間を指定する情報であり、Cellの再生は、当該VOBのCellによって指定された区間を再生することを意味している。   The cell itself is information for designating a part or all of a VOB (which is an abbreviation of Video Object, indicating an MPEG stream), and the reproduction of the cell means that the section designated by the cell of the VOB is reproduced. I mean.

コマンドは、DVDの仮想マシンによって処理されるものであり、例えば、ウェブページを表示するブラウザ上で実行されるJava(登録商標)Scriptなどに近いものである。しかしながらJava(登録商標)Scriptが論理演算の他にウィンドウやブラウザの制御(例えば、新しいブラウザのウィンドウを開くなど)を行うのに対して、DVDのコマンドは、論理演算の他にAVタイトルの再生制御、例えば、再生するチャプターの指定などを実行するだけのものである点で異なっている。   The command is processed by a DVD virtual machine, and is similar to, for example, Java (registered trademark) Script executed on a browser that displays a web page. However, Java (registered trademark) Script controls windows and browsers (for example, opens a new browser window) in addition to logical operations, whereas DVD commands play AV titles in addition to logical operations. It differs in that it only performs control, for example, specifying the chapter to be played back.

Cellはディスク上に記録されているVOBの開始及び終了アドレス(論理アドレス)をその内部情報として有しており、プレーヤは、Cellに記述されたVOBの開始及び終了アドレス情報を使ってデータの読み出し、再生を実行する。   The Cell has VOB start and end addresses (logical addresses) recorded on the disc as its internal information, and the player reads data using the VOB start and end address information described in the Cell. Execute playback.

図2は、AVデータであるMPEGストリーム中に埋め込まれているナビゲーション情報を説明する概要図である。   FIG. 2 is a schematic diagram illustrating navigation information embedded in an MPEG stream that is AV data.

SD−DVDの特長であるインタラクティビティは前述した「VIDEO_TS.IFO」や「VTS_01_0.IFO」などに記録されているナビゲーション情報だけによって実現されているのではなく、幾つかの重要な情報はナビゲーション・パック(ナビパックまたは、NV_PCKという。)と呼ばれる専用キャリアを使いVOB内に映像、音声データと一緒に多重化されている。   The interactivity, which is the feature of SD-DVD, is not realized only by the navigation information recorded in the aforementioned “VIDEO_TS.IFO”, “VTS — 01 — 0.IFO”, etc. It is multiplexed together with video and audio data in a VOB using a dedicated carrier called a pack (Navi Pack or NV_PCK).

ここでは簡単なインタラクティビティの例としてメニュー画面について説明する。メニュー画面上には、幾つかのボタンが現れ、それぞれのボタンには当該ボタンが選択実行された時の処理が定義されている。   Here, a menu screen will be described as an example of simple interactivity. Several buttons appear on the menu screen, and each button defines a process when the button is selected and executed.

また、メニュー画面上では一つのボタンが選択されており(選択ボタン上に半透明色がオーバーレイされることで該ボタンがハイライトされ、該ボタンが選択状態であることをユーザに示す)、ユーザは、リモコンの上下左右キーを使って、選択状態のボタンを上下左右の何れかのボタンに移動させることが出来る。   In addition, one button is selected on the menu screen (the translucent color is overlaid on the selection button so that the button is highlighted to indicate to the user that the button is selected), and the user The up / down / left / right keys on the remote control can be used to move the selected button to any of the up / down / left / right buttons.

リモコンの上下左右キーを使って、選択実行したいボタンまでハイライトを移動させ、決定する(決定キーを押す)ことによって対応するコマンドのプログラムが実行される。一般的には対応するタイトルやチャプターの再生がコマンドによって実行されている。   Using the up / down / left / right keys on the remote control, move the highlight to the button you want to select and execute, and press the enter key to execute the corresponding command program. In general, playback of a corresponding title or chapter is executed by a command.

図2の左上部はNV_PCKに格納される情報の概要を示している。NV_PCK内には、ハイライトカラー情報と個々のボタン情報などが含まれている。ハイライトカラー情報には、カラーパレット情報が記述され、オーバーレイ表示されるハイライトの半透明色が指定される。   The upper left part of FIG. 2 shows an outline of information stored in NV_PCK. NV_PCK includes highlight color information and individual button information. In the highlight color information, color palette information is described, and a semi-transparent color of the highlight displayed on the overlay is designated.

ボタン情報には、個々のボタンの位置情報である矩形領域情報と、当該ボタンから他のボタンへの移動情報(ユーザの上下左右キー操作それぞれに対応する移動先ボタンの指定)と、ボタンコマンド情報(当該ボタンが決定された時に実行されるコマンド)とが記述されている。   The button information includes rectangular area information that is position information of each button, movement information from the button to another button (designation of a destination button corresponding to each of the user's up / down / left / right key operations), and button command information. (Command executed when the button is determined).

メニュー画面上のハイライトは、図2の右上部に示すように、オーバーレイ画像として作られる。オーバーレイ画像は、ボタン情報の矩形領域情報にカラーパレット情報の色を付した物である。このオーバーレイ画像は図2の右部に示す背景画像と合成されて画面上に表示される。   The highlight on the menu screen is created as an overlay image as shown in the upper right part of FIG. The overlay image is obtained by adding the color palette information color to the rectangular area information of the button information. This overlay image is combined with the background image shown in the right part of FIG. 2 and displayed on the screen.

前述のようにして、DVDではメニュー画面を実現している。また、何故、ナビゲーションデータの一部をNV_PCKを使ってストリーム中に埋め込んでいるのかについては、以下の理由からである。   As described above, the menu screen is realized in the DVD. The reason why part of the navigation data is embedded in the stream using NV_PCK is as follows.

すなわち、ストリームと同期して動的にメニュー情報を更新、例えば、映画再生中の途中5分〜10分の間にだけメニュー画面を表示するといった、同期タイミングが問題となりやすい処理を問題なく実現できるようにするためである。   In other words, the menu information is dynamically updated in synchronization with the stream, for example, a menu screen is displayed only during 5 to 10 minutes in the middle of movie playback. It is for doing so.

また、もう一つの大きな理由は、NV_PCKには特殊再生を支援するための情報を格納し、DVD再生時の早送り、巻き戻しなどの非通常再生時にも円滑にAVデータをデコードし再生させる等、ユーザの操作性を向上させるためである。   Another major reason is that NV_PCK stores information for supporting special playback, and smoothly decodes and plays back AV data during non-normal playback such as fast-forward and rewind during DVD playback. This is to improve user operability.

図3は、DVDにおけるVOBの構成を示す概要図である。図に示すように、映像、音声、字幕などのデータ(図3の(1))は、MPEGシステム(ISO/IEC13818−1)規格に基づいて、パケット及びパック化し(図3の(2))、それぞれを多重化して1本のMPEGプログラムストリームにしている(図3の(3))。   FIG. 3 is a schematic diagram showing the configuration of a VOB in a DVD. As shown in the figure, data such as video, audio, and subtitles ((1) in FIG. 3) is packetized and packed based on the MPEG system (ISO / IEC13818-1) standard ((2) in FIG. 3). These are multiplexed into one MPEG program stream ((3) in FIG. 3).

また、前述した通りインタラクティブを実現するためのボタンコマンドを含んだNV_PCKも一緒に多重化をされている。   Further, as described above, NV_PCK including a button command for realizing interactive is also multiplexed together.

MPEGシステムの多重化の特徴として、多重化する個々のデータは、そのデコード順に基づくビット列になっているが、多重化されるデータ間、即ち、映像、音声、字幕の間は必ずしも再生順、言い換えればデコード順に基づいてビット列が形成されているわけではないことが挙げられる。   As a feature of MPEG system multiplexing, individual data to be multiplexed is a bit string based on the decoding order, but between the multiplexed data, that is, between video, audio, and subtitles, it is not necessarily the playback order. For example, the bit string is not formed based on the decoding order.

これはMPEGシステムストリームのデコーダモデル(図3の(4)、一般にSystem Target Decoder、またはSTDと呼ばれる)が多重化を解いた後に個々のエレメンタリストリームに対応するデコーダバッファを持ち、デコードタイミングまでに一時的にデータを蓄積している事に由来している。   This is because the MPEG system stream decoder model ((4) in FIG. 3, generally called System Target Decoder or STD) has a decoder buffer corresponding to each elementary stream after demultiplexing, and by the decoding timing It comes from temporarily accumulating data.

このデコーダバッファは、個々のエレメンタリストリーム毎にサイズが異なり、映像に対しては、232kB、音声に対しては4kB、字幕に対しては52kBをそれぞれ有している。   This decoder buffer has a different size for each elementary stream, and has 232 kB for video, 4 kB for audio, and 52 kB for subtitles.

このため、各デコーダバッファへのデータ入力タイミングは個々のエレメンタリストリームで異なるため、MPEGシステムストリームとしてビット列を形成する順番と表示(デコード)されるタイミングにずれが生じている。   For this reason, since the data input timing to each decoder buffer is different for each elementary stream, there is a difference between the order in which the bit string is formed as the MPEG system stream and the display (decoding) timing.

即ち、映像データと並んで多重化されている字幕データが必ずしも同一タイミングでデコードされているわけでは無い。   That is, subtitle data multiplexed side by side with video data is not necessarily decoded at the same timing.

ここで、ブルーレイディスク(Blu−ray(登録商標) Disc)のような大容量記録メディアにおいては、非常に高品位な映像情報を格納できる可能性がある。なお、Blu−ray(登録商標) Discは、BDまたはBD−ROMとも称される。   Here, in a large-capacity recording medium such as a Blu-ray disc (Blu-ray (registered trademark) Disc), there is a possibility that very high-quality video information can be stored. The Blu-ray (registered trademark) Disc is also referred to as a BD or a BD-ROM.

例えば、4K(3840x2160ピクセルの解像度を持つ映像情報)またはHDR(High Dynamic Rangeと一般に呼ばれる高輝度映像情報)などの映像情報をBDに格納することができると考えられる。しかしながら、HDRを含めて輝度には様々な実現方法があり、これらの実現方法の映像情報を効率的にビデオストリームとして記録および管理できるフォーマットはなかった。したがって、再生装置は、BDなどの記録媒体に記録されているビデオストリームの種別(上述の実現方法)に応じた輝度を適切に表現することができないという課題がある。   For example, it is considered that video information such as 4K (video information having a resolution of 3840 × 2160 pixels) or HDR (high luminance video information generally called High Dynamic Range) can be stored in the BD. However, there are various implementation methods for luminance including HDR, and there is no format that can efficiently record and manage video information of these implementation methods as a video stream. Therefore, there is a problem that the playback apparatus cannot appropriately express the luminance according to the type of the video stream recorded on the recording medium such as BD (the above-described implementation method).

本発明者は、上記課題を解決するために、下記の改善策を検討した。   In order to solve the above problems, the present inventor studied the following improvement measures.

本発明の一態様に係る再生装置は、符号化された映像情報であるビデオストリームを記録媒体から読み出して再生する再生装置であって、前記ビデオストリームの輝度のダイナミックレンジが、第1のダイナミックレンジか、前記第1のダイナミックレンジよりも広い第2のダイナミックレンジかを示す第1の属性情報を、前記ビデオストリームに対応付けて前記記録媒体に記録されている管理情報ファイルから読み出す属性読み出し部と、前記ビデオストリームを前記記録媒体から読み出して復号することにより復号映像情報を生成する復号部と、読み出された前記第1の属性情報が第2のダイナミックレンジを示す場合、前記第2のダイナミックレンジに応じた前記ビデオストリームの最高輝度を示す最高輝度情報とともに、前記復号映像情報を出力する出力部とを備える。   A playback apparatus according to an aspect of the present invention is a playback apparatus that reads a video stream, which is encoded video information, from a recording medium and plays back the video stream. An attribute reading unit that reads first attribute information indicating whether the second dynamic range is wider than the first dynamic range from a management information file recorded on the recording medium in association with the video stream; A decoding unit that generates decoded video information by reading and decoding the video stream from the recording medium; and the second dynamic range when the read first attribute information indicates a second dynamic range. Along with the maximum luminance information indicating the maximum luminance of the video stream according to the range, the decoded video is displayed. And an output unit for outputting information.

これにより、記録媒体に記録されているビデオストリームの種別(特に、ダイナミックレンジ)に応じた輝度を適切に表現することができる。   Thereby, the luminance according to the type (particularly, dynamic range) of the video stream recorded on the recording medium can be appropriately expressed.

また、前記第1の属性情報は、前記第2のダイナミックレンジを示す場合、さらに、前記第2のダイナミックレンジのタイプを示し、前記出力部は、前記第2のダイナミックレンジのタイプに応じた前記最高輝度情報と前記復号映像情報とを出力してもよい。例えば、前記第1の属性情報によって示されるタイプが、前記ビデオストリームの輝度範囲が静的に表現されるタイプである場合、前記出力部は、静的に最高輝度を示す前記最高輝度情報と前記復号映像情報とを出力する。または、前記第1の属性情報によって示されるタイプが、前記ビデオストリームの輝度範囲が静的および動的に表現されるタイプである場合、前記出力部は、静的および動的に最高輝度を示す前記最高輝度情報と前記復号映像情報とを出力する。なお、前記最高輝度情報は、前記ビデオストリームの全てのピクチャのうちの最高輝度によって定義される輝度範囲を示すことによって、静的に輝度範囲を示し、前記ビデオストリームに含まれる1つまたは複数のピクチャからなるグループごとに、当該グループのうちの最高輝度によって定義される輝度範囲を示すことによって、動的に輝度範囲を示す。または、前記第1の属性情報によって示されるタイプが、基本ビデオストリームと、前記基本ビデオストリームの輝度を拡張するための拡張ビデオストリームとによって、輝度が表現されるタイプである場合、前記復号部は、前記ビデオストリームを前記拡張ビデオストリームとして復号することによって前記復号映像情報を生成し、さらに、前記基本ビデオストリームを前記記録媒体から読み出して復号することによって基本映像情報を生成し、前記出力部は、前記最高輝度情報と、前記基本映像情報を用いて画像処理された前記復号映像情報とを出力する。   In addition, when the first attribute information indicates the second dynamic range, the first attribute information further indicates the type of the second dynamic range, and the output unit corresponds to the type of the second dynamic range. The maximum luminance information and the decoded video information may be output. For example, when the type indicated by the first attribute information is a type in which the luminance range of the video stream is statically expressed, the output unit statically indicates the highest luminance information indicating the highest luminance, and the Decoded video information is output. Alternatively, when the type indicated by the first attribute information is a type in which the luminance range of the video stream is statically and dynamically expressed, the output unit statically and dynamically shows the maximum luminance. The highest luminance information and the decoded video information are output. The highest luminance information indicates a luminance range statically by indicating a luminance range defined by the highest luminance of all the pictures of the video stream, and includes one or more of the highest luminance information included in the video stream. For each group of pictures, the luminance range is dynamically indicated by indicating the luminance range defined by the highest luminance of the group. Alternatively, when the type indicated by the first attribute information is a type in which luminance is expressed by a basic video stream and an extended video stream for extending the luminance of the basic video stream, the decoding unit Generating the decoded video information by decoding the video stream as the extended video stream, further generating basic video information by reading the basic video stream from the recording medium and decoding, The highest luminance information and the decoded video information image-processed using the basic video information are output.

これにより、記録媒体にどのようなタイプのビデオストリームが記録されていても、そのビデオストリームのタイプに応じた輝度を適切に表現することができる。言い換えれば、どのような実現方法のHDRビデオストリームが記録媒体に記録されていても、その実現方法に応じた輝度を適切に表現することができる。   Thereby, whatever type of video stream is recorded on the recording medium, the luminance according to the type of the video stream can be appropriately expressed. In other words, whatever the implementation method of the HDR video stream is recorded on the recording medium, the luminance according to the implementation method can be appropriately expressed.

また、前記属性読み出し部は、さらに、前記ビデオストリームの最高輝度を示す第2の属性情報を、前記管理情報ファイルから読み出し、前記出力部は、さらに、前記第2の属性情報を含む前記最高輝度情報を出力してもよい。   The attribute reading unit further reads second attribute information indicating the highest luminance of the video stream from the management information file, and the output unit further includes the second luminance information including the second attribute information. Information may be output.

これにより、ビデオストリームの輝度をより適切に表現することができる。   Thereby, the brightness of the video stream can be expressed more appropriately.

また、本発明の一態様に係る記録媒体は、符号化された映像情報であるビデオストリームと、前記ビデオストリームに対応付けられた管理情報ファイルとが記録され、前記管理情報ファイルは、前記ビデオストリームの輝度のダイナミックレンジが、第1のダイナミックレンジか、前記第1のダイナミックレンジよりも広い第2のダイナミックレンジかを示す第1の属性情報を含む。   The recording medium according to an aspect of the present invention records a video stream that is encoded video information and a management information file associated with the video stream, and the management information file includes the video stream. The first attribute information indicating whether the dynamic range of the brightness of the second dynamic range is the first dynamic range or the second dynamic range wider than the first dynamic range.

これにより、再生装置に対して、ビデオストリームの種別に応じた輝度を適切に表現させることができる。また、異なる実現方法のHDRビデオストリームを同一の記録媒体に効率的に記録および管理することができる。   Thereby, it is possible to cause the playback device to appropriately express the luminance according to the type of the video stream. Also, HDR video streams of different implementation methods can be efficiently recorded and managed on the same recording medium.

また、前記第1の属性情報は、前記第2のダイナミックレンジを示す場合、さらに、前記第2のダイナミックレンジのタイプを示してもよい。例えば、前記第1の属性情報は、前記第2のダイナミックレンジのタイプとして、前記ビデオストリームの輝度範囲が静的に表現される第1のタイプを示す。または、前記第1の属性情報は、前記第2のダイナミックレンジのタイプとして、前記ビデオストリームの輝度範囲が静的および動的に表現される第2のタイプを示す。なお、前記第2のタイプでは、前記ビデオストリームの全てのピクチャのうちの最高輝度を示す第1の補助拡張情報が前記ビデオストリームに含まれていることによって、前記ビデオストリームの輝度範囲が静的に表現され、前記ビデオストリームに含まれる1つまたは複数のピクチャからなるグループごとに、当該グループのうちの最高輝度を示す第2の補助拡張情報が前記ビデオストリームに含まれているによって、前記ビデオストリームの輝度範囲が動的に表現される。または、前記第1の属性情報は、基本ビデオストリームと、前記基本ビデオストリームの輝度を拡張するための拡張ビデオストリームである前記ビデオストリームとによって、輝度が表現される第3のタイプを、前記第2のダイナミックレンジのタイプとして示し、前記記録媒体には、さらに、前記基本ビデオストリームが記録されている。   When the first attribute information indicates the second dynamic range, the first attribute information may further indicate the type of the second dynamic range. For example, the first attribute information indicates the first type in which the luminance range of the video stream is statically expressed as the second dynamic range type. Alternatively, the first attribute information indicates a second type in which the luminance range of the video stream is statically and dynamically expressed as the second dynamic range type. In the second type, since the video stream includes first auxiliary extension information indicating the highest luminance among all the pictures of the video stream, the luminance range of the video stream is static. For each group of one or a plurality of pictures represented in the video stream, the video stream includes second auxiliary extension information indicating the highest luminance of the group, so that the video The luminance range of the stream is dynamically expressed. Alternatively, the first attribute information may include a third type in which luminance is expressed by a basic video stream and the video stream that is an extended video stream for extending the luminance of the basic video stream. The basic video stream is further recorded on the recording medium.

これにより、記録媒体にどのようなタイプのビデオストリームが記録されていても、再生装置に対して、そのビデオストリームのタイプに応じた輝度を適切に表現させることができる。言い換えれば、どのような実現方法のHDRビデオストリームが記録媒体に記録されていても、再生装置に対して、その実現方法に応じた輝度を適切に表現させることができる。   Thus, regardless of what type of video stream is recorded on the recording medium, it is possible to cause the playback apparatus to appropriately express the luminance corresponding to the type of the video stream. In other words, whatever the implementation method of the HDR video stream is recorded on the recording medium, the playback apparatus can appropriately express the luminance according to the implementation method.

また。前記管理情報ファイルは、さらに、前記ビデオストリームの最高輝度を示す第2の属性情報を含んでもよい。   Also. The management information file may further include second attribute information indicating the maximum luminance of the video stream.

これにより、再生装置に対して、ビデオストリームの輝度をより適切に表現させることができる。   Thereby, the luminance of the video stream can be more appropriately expressed by the playback device.

なお、これらの全般包括的または具体的な態様は、装置、方法、システム、集積回路、コンピュータプログラムまたはコンピュータ読み取り可能なCD−ROMなどの記録媒体で実現されてもよく、システム、方法、集積回路、コンピュータプログラムまたは記録媒体の任意な組み合わせで実現されてもよい。   Note that these general comprehensive or specific modes may be realized by a recording medium such as an apparatus, a method, a system, an integrated circuit, a computer program, or a computer-readable CD-ROM. The present invention may be realized by any combination of computer programs or recording media.

以下、添付の図面を参照しながら、本発明を実施するための最良の形態ついて説明する。   The best mode for carrying out the present invention will be described below with reference to the accompanying drawings.

なお、本願請求項1に係る発明に最も近い実施の形態は実施の形態2であるが、理解を容易にするために、実施の形態2における情報記録媒体等の基本的な構成を説明する実施の形態1を先に説明する。   The embodiment closest to the invention according to claim 1 of the present application is the embodiment 2. However, in order to facilitate understanding, the basic configuration of the information recording medium and the like in the embodiment 2 will be described. The first embodiment will be described first.

(実施の形態1)
まず、BD−ROMおよびBD−ROMを再生するBD−ROMプレーヤの基本的な構成および動作について、図1〜図30を用いて説明する。
(Embodiment 1)
First, a basic configuration and operation of a BD-ROM and a BD-ROM player that reproduces the BD-ROM will be described with reference to FIGS.

(ディスク上の論理データ構造)
図4は、BD−ROMのデータ階層を示す図である。
(Logical data structure on disk)
FIG. 4 is a diagram showing a data hierarchy of the BD-ROM.

図4に示すように、ディスク媒体であるBD−ROM104上には、AVデータ103と、AVデータに関する管理情報及びAV再生シーケンスなどのBD管理情報102と、インタラクティブを実現するBD再生プログラム101とが記録されている。   As shown in FIG. 4, on the BD-ROM 104, which is a disk medium, there is AV data 103, BD management information 102 such as management information and AV playback sequence related to AV data, and a BD playback program 101 that realizes interactive processing. It is recorded.

なお、本実施の形態では、映画などのAVコンテンツを再生するためのAVアプリケーションを主眼においてBD−ROMの説明を行うが、BD−ROMをCD−ROMやDVD−ROMの様にコンピュータ用途の記録媒体として使用することも当然のことながら可能である。   In this embodiment, the BD-ROM will be described focusing on the AV application for reproducing AV contents such as movies. However, the BD-ROM is recorded for computer use like a CD-ROM or DVD-ROM. Of course, it can also be used as a medium.

図5は、前述のBD−ROM104に記録されている論理データの構造を示す図である。BD−ROM104は、他の光ディスク、例えばDVDやCDなどと同様にその内周から外周に向けてらせん状に記録領域を持ち、内周のリードインと外周のリードアウトの間に論理データを記録できる論理アドレス空間を有している。   FIG. 5 is a diagram showing the structure of logical data recorded in the BD-ROM 104 described above. The BD-ROM 104 has a recording area that spirals from the inner periphery to the outer periphery in the same manner as other optical discs such as DVD and CD, and records logical data between the inner lead-in and the outer lead-out. It has a logical address space that can be created.

また、リードインの内側にはBurst Cutting Area(BCA)と呼ばれる、ドライブでしか読み出せない特別な領域がある。この領域はアプリケーションから読み出せないため、例えば著作権保護技術などに利用されることがよくある。   In addition, there is a special area called “Burst Cutting Area (BCA)” inside the lead-in that can be read only by the drive. Since this area cannot be read from an application, it is often used for copyright protection technology, for example.

論理アドレス空間には、ファイルシステム情報(ボリューム)を先頭に映像データなどのアプリケーションデータが記録されている。ファイルシステムとは従来技術で説明した通り、UDFやISO9660等の規格により定められたデータを管理する仕組みのことであり、通常のPCと同じように記録されている論理データをディレクトリ、ファイル構造を使って読み出しする事が可能になっている。   Application data such as video data is recorded in the logical address space with file system information (volume) at the head. A file system is a mechanism for managing data defined by standards such as UDF and ISO 9660 as described in the prior art. Logical data recorded in the same way as a normal PC is stored in a directory and file structure. It is possible to read by using.

本実施の形態の場合、BD−ROM104上のディレクトリ、ファイル構造は、ルートディレクトリ(ROOT)直下にBDVIDEOディレクトリが置かれている。このディレクトリはBD−ROMで扱うAVデータや管理情報などのデータ(図4に示すBD再生プログラム101、BD管理情報102、AVデータ103)が記録されているディレクトリである。   In the case of the present embodiment, the directory and file structure on the BD-ROM 104 is a BDVIDEO directory placed directly under the root directory (ROOT). This directory is a directory in which data such as AV data and management information handled by the BD-ROM (BD playback program 101, BD management information 102, AV data 103 shown in FIG. 4) is recorded.

BDVIDEOディレクトリの下には、次の7種類のファイルが記録されている。   The following seven types of files are recorded under the BDVIDEO directory.

BD.INFO(ファイル名固定)
「BD管理情報」の一つであり、BD−ROM全体に関する情報を記録したファイルである。BD−ROMプレーヤは最初にこのファイルを読み出す。
BD. INFO (fixed file name)
This is one of “BD management information” and is a file in which information related to the entire BD-ROM is recorded. The BD-ROM player first reads this file.

BD.PROG(ファイル名固定)
「BD再生プログラム」の一つであり、BD−ROM全体に関わるプログラムを記録したファイルである。
BD. PROG (fixed file name)
It is one of “BD playback programs” and is a file in which programs related to the entire BD-ROM are recorded.

XXX.PL(「XXX」は可変、拡張子「PL」は固定)
「BD管理情報」の一つであり、シナリオを記録するプレイリスト(Play List)情報を記録したファイルである。プレイリスト毎に1つのファイルを持っている。
XXX. PL ("XXX" is variable, extension "PL" is fixed)
It is one of “BD management information”, and is a file in which play list information for recording a scenario is recorded. I have one file per playlist.

XXX.PROG(「XXX」は可変、拡張子「PROG」は固定)
「BD再生プログラム」の一つであり、前述したプレイリスト毎のプログラムを記録したファイルである。プレイリストとの対応はファイルボディ名(「XXX」が一致する)によって識別される。
XXX. PROG ("XXX" is variable, extension "PROG" is fixed)
It is one of “BD playback programs” and is a file in which a program for each playlist described above is recorded. Correspondence with a playlist is identified by a file body name (“XXX” matches).

YYY.VOB(「YYY」は可変、拡張子「VOB」は固定)
「AVデータ」の一つであり、VOB(従来例で説明したVOBと同じ)を記録したファイルである。1つのVOBは1つのファイルに対応する。
YYY. VOB ("YYY" is variable, extension "VOB" is fixed)
It is one of “AV data” and is a file in which VOB (same as VOB described in the conventional example) is recorded. One VOB corresponds to one file.

YYY.VOBI(「YYY」は可変、拡張子「VOBI」は固定)
「BD管理情報」の一つであり、AVデータであるVOBに関わる管理情報を記録したファイルである。VOBとの対応はファイルボディ名(「YYY」が一致する)によって識別される。
YYY. VOBI ("YYY" is variable, extension "VOBI" is fixed)
This is one of “BD management information” and is a file in which management information related to VOB as AV data is recorded. The correspondence with the VOB is identified by the file body name (“YYY” matches).

ZZZ.PNG(「ZZZ」は可変、拡張子「PNG」は固定)
「AVデータ」の一つであり、字幕及びメニュー画面を構成するためのイメージデータであるPNG(World Wide Web Consortium(W3C)によって標準化された画像フォーマットであり「ピング」と読む。)形式のイメージファイルである。1つのPNGイメージは1つのファイルに対応する。
ZZZ. PNG ("ZZZ" is variable, extension "PNG" is fixed)
PNG (an image format standardized by the World Wide Web Consortium (W3C), which is one of “AV data” and image data for constructing subtitles and menu screens, and is read as “ping”). It is a file. One PNG image corresponds to one file.

(プレーヤの構成)
次に、前述のBD−ROM104を再生するプレーヤの構成について図6及び図7を用いて説明する。
(Player configuration)
Next, the configuration of the player that reproduces the BD-ROM 104 will be described with reference to FIGS.

図6は、BD−ROM104を再生するBD−ROMプレーヤの基本的な構成の概要を示す図である。   FIG. 6 is a diagram showing an outline of a basic configuration of a BD-ROM player that reproduces the BD-ROM 104.

図6に示すBD−ROMプレーヤにおいて、BD−ROM104上のデータは、光ピックアップ202を通して読み出される。読み出されたデータはそれぞれのデータの種類に応じて専用のメモリに記録される。   In the BD-ROM player shown in FIG. 6, data on the BD-ROM 104 is read through the optical pickup 202. The read data is recorded in a dedicated memory according to the type of each data.

BD再生プログラム(「BD.PROG」または「XXX.PROG」ファイル)はプログラム記録メモリ203に、BD管理情報(「BD.INFO」、「XXX.PL」または「YYY.VOBI」ファイル)は管理情報記録メモリ204に、AVデータ(「YYY.VOB」または「ZZZ.PNG」ファイル)はAV記録メモリ205にそれぞれ記録される。   The BD playback program (“BD.PROG” or “XXX.PROG” file) is stored in the program recording memory 203, and the BD management information (“BD.INFO”, “XXX.PL” or “YYY.VOBI” file) is managed information. AV data (“YYY.VOB” or “ZZZ.PNG” file) is recorded in the recording memory 204 in the AV recording memory 205, respectively.

プログラム記録メモリ203に記録されたBD再生プログラムはプログラム処理部206によって処理される。管理情報記録メモリ204に記録されたBD管理情報は管理情報処理部207によって処理される。   The BD playback program recorded in the program recording memory 203 is processed by the program processing unit 206. The BD management information recorded in the management information recording memory 204 is processed by the management information processing unit 207.

また、AV記録メモリ205に記録されたAVデータはプレゼンテーション処理部208によって処理される。   The AV data recorded in the AV recording memory 205 is processed by the presentation processing unit 208.

プログラム処理部206は、管理情報処理部207から再生するプレイリストの情報やプログラムの実行タイミングなどのイベント情報を受け取りプログラムの処理を行う。また、プログラムで、再生するプレイリストを動的に変更する事が可能であり、この場合は管理情報処理部207に対して変更後のプレイリストの再生命令を送ることで実現する。   The program processing unit 206 receives event information such as play list information and program execution timing from the management information processing unit 207 and processes the program. In addition, it is possible to dynamically change the play list to be played back by the program, and in this case, it is realized by sending a play list play command after change to the management information processing unit 207.

プログラム処理部206は、更に、ユーザからのイベント、例えば、ユーザが操作するリモコンからのリクエストを受け付け、ユーザイベントに対応するプログラムがある場合は、実行処理する。   The program processing unit 206 further receives an event from the user, for example, a request from a remote controller operated by the user, and executes an execution process when there is a program corresponding to the user event.

管理情報処理部207は、プログラム処理部206の指示を受け、その指示に対応するプレイリスト及びそのプレイリストに対応したVOBの管理情報を解析する。更に、プレゼンテーション処理部208に再生の対象となるAVデータの再生を指示する。   The management information processing unit 207 receives an instruction from the program processing unit 206 and analyzes the playlist corresponding to the instruction and the management information of the VOB corresponding to the playlist. Furthermore, the presentation processing unit 208 is instructed to reproduce the AV data to be reproduced.

また、管理情報処理部207は、プレゼンテーション処理部208から基準時刻情報を受け取り、時刻情報に基づいてプレゼンテーション処理部208にAVデータ再生の停止指示を行う。更に、プログラム処理部206に対してプログラム実行タイミングを示すイベントを生成する。   Also, the management information processing unit 207 receives the reference time information from the presentation processing unit 208, and instructs the presentation processing unit 208 to stop AV data reproduction based on the time information. Furthermore, an event indicating the program execution timing is generated for the program processing unit 206.

プレゼンテーション処理部208は、映像、音声、および字幕それぞれのデータに対応するデコーダを持ち、管理情報処理部207からの指示に従い、AVデータのデコード及び出力を行う。映像データ及び字幕データは、デコード後にそれぞれの専用プレーンに描画される。   The presentation processing unit 208 has a decoder corresponding to video, audio, and subtitle data, and decodes and outputs AV data in accordance with an instruction from the management information processing unit 207. Video data and subtitle data are drawn on each dedicated plane after decoding.

具体的には、映像データはビデオプレーン210に描画され、字幕データ等のイメージデータはイメージプレーン209に描画される。更に、2つのプレーンに描画された映像の合成処理が合成処理部211によって行われTVなどの表示デバイスへ出力される。   Specifically, video data is drawn on the video plane 210, and image data such as caption data is drawn on the image plane 209. Furthermore, the composition processing of the video drawn on the two planes is performed by the composition processing unit 211 and output to a display device such as a TV.

図6で示すように、BD−ROMプレーヤは図4で示したBD−ROM104に記録されているデータ構造に基づいた構成をとっている。   As shown in FIG. 6, the BD-ROM player has a configuration based on the data structure recorded in the BD-ROM 104 shown in FIG.

図7は、図6に示すプレーヤの構成を詳細化したブロック図である。図6に示す各構成部と、図7に示す各構成部との対応は以下の通りである。   FIG. 7 is a detailed block diagram of the configuration of the player shown in FIG. Correspondence between each component shown in FIG. 6 and each component shown in FIG. 7 is as follows.

AV記録メモリ205はイメージメモリ308とトラックバッファ309に対応する。プログラム処理部206はプログラムプロセッサ302とUO(User Operation)マネージャ303に対応する。管理情報処理部207はシナリオプロセッサ305とプレゼンテーションコントローラ306とに対応する。プレゼンテーション処理部208はクロック307、デマルチプレクサ310、イメージプロセッサ311、ビデオプロセッサ312とサウンドプロセッサ313とに対応する。   The AV recording memory 205 corresponds to the image memory 308 and the track buffer 309. The program processing unit 206 corresponds to a program processor 302 and a UO (User Operation) manager 303. The management information processing unit 207 corresponds to the scenario processor 305 and the presentation controller 306. The presentation processing unit 208 corresponds to the clock 307, the demultiplexer 310, the image processor 311, the video processor 312, and the sound processor 313.

BD−ROM104から読み出されたVOBデータ(MPEGストリーム)はトラックバッファ309に、イメージデータ(PNG)はイメージメモリ308にそれぞれ記録される。   The VOB data (MPEG stream) read from the BD-ROM 104 is recorded in the track buffer 309, and the image data (PNG) is recorded in the image memory 308.

デマルチプレクサ310は、クロック307から得られる時刻に基づき、トラックバッファ309に記録されたVOBデータを抜き出す。更に、VOBデータに含まれる映像データをビデオプロセッサ312に音声データをサウンドプロセッサ313にそれぞれ送り込む。   The demultiplexer 310 extracts VOB data recorded in the track buffer 309 based on the time obtained from the clock 307. Further, the video data included in the VOB data is sent to the video processor 312 and the audio data is sent to the sound processor 313.

ビデオプロセッサ312及びサウンドプロセッサ313はそれぞれMPEGシステム規格で定められる通りに、デコーダバッファとデコーダからそれぞれ構成されている。即ち、デマルチプレクサ310から送りこまれる映像、音声それぞれのデータは、それぞれのデコーダバッファに一時的に記録され、クロック307に従い個々のデコーダでデコード処理される。   The video processor 312 and the sound processor 313 are each composed of a decoder buffer and a decoder as defined by the MPEG system standard. That is, the video and audio data sent from the demultiplexer 310 are temporarily recorded in the respective decoder buffers and decoded by the individual decoders according to the clock 307.

イメージメモリ308に記録されたPNGデータは、次の2つの処理方法がある。PNGデータが字幕用の場合は、プレゼンテーションコントローラ306によってデコードタイミングが指示される。クロック307からの時刻情報をシナリオプロセッサ305が一旦受け、適切な字幕表示が行えるように、字幕表示時刻(開始及び終了)になればプレゼンテーションコントローラ306に対して字幕の表示、非表示の指示を出す。   The PNG data recorded in the image memory 308 has the following two processing methods. When the PNG data is for subtitles, the presentation controller 306 instructs the decoding timing. In order for the scenario processor 305 to receive the time information from the clock 307 once and to display appropriate subtitles, when the subtitle display time (start and end) is reached, the presentation controller 306 is instructed to display / hide subtitles. .

プレゼンテーションコントローラ306からデコード/表示の指示を受けたイメージプロセッサ311は対応するPNGデータをイメージメモリ308から抜き出し、デコードし、イメージプレーン209に描画する。   In response to the decoding / display instruction from the presentation controller 306, the image processor 311 extracts the corresponding PNG data from the image memory 308, decodes it, and draws it on the image plane 209.

また、PNGデータがメニュー画面用の場合は、プログラムプロセッサ302によってデコードタイミングが指示される。プログラムプロセッサ302がいつイメージのデコードを指示するかは、プログラムプロセッサ302が処理しているBDプログラムに因るものであって一概には決まらない。   If the PNG data is for a menu screen, the program processor 302 instructs the decoding timing. The time when the program processor 302 instructs to decode the image depends on the BD program being processed by the program processor 302 and is not generally determined.

イメージデータ及び映像データは、図6で説明したようにそれぞれデコード後にイメージプレーン209およびビデオプレーン210に描画され、合成処理部211によって合成出力される。   As described with reference to FIG. 6, the image data and the video data are respectively drawn on the image plane 209 and the video plane 210 after being decoded, and are synthesized and output by the synthesis processing unit 211.

BD−ROM104から読み出された管理情報(シナリオ、AV管理情報)は、管理情報記録メモリ204に記録されるが、シナリオ情報(「BD.INFO」及び「XXX.PL」)はシナリオプロセッサ305によって読み出され処理される。また、AV管理情報(「YYY.VOBI」)はプレゼンテーションコントローラ306によって読み出され処理される。   Management information (scenario, AV management information) read from the BD-ROM 104 is recorded in the management information recording memory 204, but scenario information (“BD.INFO” and “XXX.PL”) is recorded by the scenario processor 305. Read and process. AV management information (“YYY.VOBI”) is read and processed by the presentation controller 306.

シナリオプロセッサ305は、プレイリストの情報を解析し、プレイリストによって参照されているVOBとその再生位置をプレゼンテーションコントローラ306に指示し、プレゼンテーションコントローラ306は対象となるVOBの管理情報(「YYY.VOBI」)を解析して、対象となるVOBを読み出すようにドライブコントローラ317に指示を出す。   The scenario processor 305 analyzes the information of the playlist, and instructs the presentation controller 306 about the VOB referenced by the playlist and its playback position. The presentation controller 306 manages the management information of the target VOB (“YYY.VOBI”). ) And the drive controller 317 is instructed to read out the target VOB.

ドライブコントローラ317はプレゼンテーションコントローラ306の指示に従い、光ピックアップ202を移動させ、対象となるAVデータの読み出しを行う。読み出されたAVデータは、前述したようにイメージメモリ308またはトラックバッファ309に記録される。   The drive controller 317 moves the optical pickup 202 in accordance with an instruction from the presentation controller 306 and reads the target AV data. The read AV data is recorded in the image memory 308 or the track buffer 309 as described above.

また、シナリオプロセッサ305は、クロック307の時刻を監視し、管理情報で設定されているタイミングでイベントをプログラムプロセッサ302に投げる。   Further, the scenario processor 305 monitors the time of the clock 307 and throws an event to the program processor 302 at the timing set in the management information.

プログラム記録メモリ203に記録されたBDプログラム(「BD.PROG」または「XXX.PROG」)は、プログラムプロセッサ302によって実行処理される。プログラムプロセッサ302がBDプログラムを処理するのは、シナリオプロセッサ305からイベントが送られてきた場合か、UOマネージャ303からイベントが送られてきた場合である。   The BD program (“BD.PROG” or “XXX.PROG”) recorded in the program recording memory 203 is executed by the program processor 302. The program processor 302 processes the BD program when an event is sent from the scenario processor 305 or when an event is sent from the UO manager 303.

UOマネージャ303は、ユーザからリモコンキーによってリクエストが送られてきた場合に、当該リクエストに対応するイベントを生成しプログラムプロセッサ302に送る。   When a request is sent from the user using a remote control key, the UO manager 303 generates an event corresponding to the request and sends it to the program processor 302.

このような各構成部の動作により、BD−ROMの再生がおこなわれる。   The BD-ROM is reproduced by the operation of each component.

(アプリケーション空間)
図8は、BD−ROMのアプリケーション空間を示す図である。
(Application space)
FIG. 8 is a diagram showing an application space of the BD-ROM.

BD−ROMのアプリケーション空間では、プレイリスト(PlayList)が一つの再生単位になっている。プレイリストはセル(Cell)の再生シーケンスから構成される静的なシナリオと、プログラムによって記述される動的なシナリオとを有している。   In the application space of the BD-ROM, a play list (PlayList) is one reproduction unit. The playlist has a static scenario composed of a cell playback sequence and a dynamic scenario described by the program.

プログラムによる動的なシナリオが無い限り、プレイリストは個々のセルを順に再生するだけであり、また、全てのセルの再生を終了した時点でプレイリストの再生は終了する。   Unless there is a dynamic scenario by the program, the playlist only reproduces the individual cells in order, and the reproduction of the playlist ends when the reproduction of all the cells is completed.

一方で、プログラムは、プレイリストを超えての再生記述や、ユーザの選択またはプレーヤの状態に応じて再生する対象を動的に変えることが可能である。典型的な例としてはメニュー画面を介した再生対象の動的変更が挙げられる。BD−ROMの場合、メニューとはユーザの選択によって再生するシナリオ、即ちプレイリストを動的に選択するための機能の構成要素の1つである。   On the other hand, the program can dynamically change the reproduction target depending on the reproduction description beyond the playlist, the user's selection or the player's state. A typical example is dynamic change of a reproduction target via a menu screen. In the case of a BD-ROM, the menu is one of components of a function for dynamically selecting a scenario to be played back by a user's selection, that is, a playlist.

また、ここで言うプログラムは、時間イベントまたはユーザイベントによって実行されるイベントハンドラの事である。   The program referred to here is an event handler executed by a time event or a user event.

時間イベントは、プレイリスト中に埋め込まれた時刻情報に基づいて生成されるイベントである。図7で説明したシナリオプロセッサ305からプログラムプロセッサ302に送られるイベントがこれに相当する。時間イベントが発行されると、プログラムプロセッサ302はIDによって対応付けられるイベントハンドラを実行処理する。   The time event is an event generated based on time information embedded in the playlist. The event sent from the scenario processor 305 to the program processor 302 described in FIG. 7 corresponds to this. When a time event is issued, the program processor 302 executes an event handler associated with the ID.

前述した通り、実行されるプログラムが他のプレイリストの再生を指示することが可能であり、この場合には、現在再生されているプレイリストの再生は中止され、指定されたプレイリストの再生へと遷移する。   As described above, the program to be executed can instruct playback of another playlist. In this case, playback of the currently played playlist is stopped and playback of the specified playlist is started. And transition.

ユーザイベントは、ユーザのリモコンキー操作によって生成されるイベントである。ユーザイベントは大きく2つのタイプに分けられる。一つ目は、リモコンが備えるカーソルキー(「上」「下」「左」「右」キー)または「決定」キーの操作によって生成されるメニュー選択のイベントである。   A user event is an event generated by a user's remote control key operation. User events are roughly divided into two types. The first is a menu selection event generated by operating a cursor key ("Up", "Down", "Left", "Right" key) or "Determination" key provided on the remote control.

メニュー選択のイベントに対応するイベントハンドラはプレイリスト内の限られた期間でのみ有効である。つまり、プレイリストの情報として、個々のイベントハンドラの有効期間が設定されている。プログラムプロセッサ302は、リモコンの「上」「下」「左」「右」キーまたは「決定」キーが押された時に有効なイベントハンドラを検索して、有効なイベントハンドラがある場合は当該イベントハンドラが実行処理される。他の場合は、メニュー選択のイベントは無視されることになる。   The event handler corresponding to the menu selection event is valid only for a limited period in the playlist. That is, the validity period of each event handler is set as the playlist information. The program processor 302 searches for a valid event handler when the “up”, “down”, “left”, “right” key or “decision” key of the remote controller is pressed, and if there is a valid event handler, the event handler Is executed. In other cases, menu selection events will be ignored.

二つ目のユーザイベントは、「メニュー」キーの操作によって生成されるメニュー画面呼び出しのイベントである。メニュー画面呼び出しのイベントが生成されると、グローバルイベントハンドラが呼ばれる。   The second user event is a menu screen call event generated by operating the “menu” key. When a menu screen call event is generated, a global event handler is called.

グローバルイベントハンドラはプレイリストに依存せず、常に有効なイベントハンドラである。この機能を使うことにより、DVDのメニューコールを実装することができる。メニューコールを実装することにより、タイトル再生中に音声、字幕メニューなどを呼び出し、音声または字幕を変更後に中断した地点からのタイトル再生を実行することができる。   A global event handler does not depend on a playlist and is always an effective event handler. By using this function, DVD menu calls can be implemented. By implementing the menu call, it is possible to call the audio, subtitle menu, etc. during the title reproduction, and execute the title reproduction from the point where the audio or subtitle was interrupted after the change.

プレイリストで静的シナリオを構成する単位であるセル(Cell)はVOB(MPEGストリーム)の全部または一部の再生区間を参照したものである。セルはVOB内の再生区間を開始、終了時刻の情報として持っている。個々のVOBと一対になっているVOB管理情報(VOBI)は、その内部にタイムマップ(Time MapまたはTM)を有しており、このタイムマップによって前述したVOBの再生、終了時刻をVOB内(即ち対象となるファイル「YYY.VOB」内)での読み出し開始アドレス及び終了アドレスを導き出すことが可能である。なおタイムマップの詳細は図14を用いて後述する。   A cell (Cell), which is a unit constituting a static scenario in a playlist, refers to all or part of a playback section of a VOB (MPEG stream). The cell has a playback section in the VOB as start and end time information. The VOB management information (VOBI) paired with each VOB has a time map (Time Map or TM) inside, and the playback and end times of the VOB described above are indicated in the VOB ( That is, it is possible to derive the read start address and end address in the target file “YYY.VOB”). Details of the time map will be described later with reference to FIG.

(VOBの詳細)
図9は、本実施の形態で使用するMPEGストリーム(VOB)の構成を示す図である。図9に示すように、VOBは複数のVideo Object Unit(VOBU)によって構成されている。VOBUは、MPEGビデオストリームにおけるGroup Of Pictures(GOP)を基準とする単位であり、音声データも含んだ多重化ストリームとしての一再生単位である。
(Details of VOB)
FIG. 9 is a diagram showing the structure of an MPEG stream (VOB) used in the present embodiment. As shown in FIG. 9, the VOB is composed of a plurality of Video Object Units (VOBU). The VOBU is a unit based on Group Of Pictures (GOP) in the MPEG video stream, and is one reproduction unit as a multiplexed stream including audio data.

VOBUは0.4秒から1.0秒の再生時間を持ち、通常は0.5秒の再生時間を持っている。これはMPEGのGOPの構造が通常は15フレーム/秒(NTSCの場合)であることによって導かれるものである。   A VOBU has a playback time of 0.4 to 1.0 seconds, and normally has a playback time of 0.5 seconds. This is derived from the fact that the MPEG GOP structure is usually 15 frames / second (in the case of NTSC).

VOBUは、その内部に映像データであるビデオパック(V_PCK)と、音声データであるオーディオパック(A_PCK)とを有している。各パックは1セクタで構成され、本実施の形態の場合は2kB単位で構成されている。   The VOBU includes therein a video pack (V_PCK) that is video data and an audio pack (A_PCK) that is audio data. Each pack is composed of one sector, and in the present embodiment, it is composed of 2 kB units.

図10は、MPEGストリームにおけるパックの構成を示す図である。   FIG. 10 is a diagram showing the structure of a pack in the MPEG stream.

図10に示すように、映像データ及び音声データといったエレメンタリデータは、ペイロードと呼ばれるパケットのデータ格納領域に先頭から順次入れられていく。ペイロードにはパケットヘッダが付けられ1つのパケットを構成する。   As shown in FIG. 10, elementary data such as video data and audio data are sequentially entered from the head into a data storage area of a packet called a payload. A packet header is attached to the payload to form one packet.

パケットヘッダには、ペイロードに格納してあるデータがどのストリームのデータであるのか、映像データであるのか音声データであるのか、および、映像データまたは音声データがそれぞれ複数ストリーム分ある場合に、どのストリームのデータなのかを識別するためのID(stream_id)、並びに、当該ペイロードのデコード及び表示時刻情報であるタイムスタンプであるDecode Time Stamp(DTS)及びPresentation Time Stamp(PTS)が記録されている。   In the packet header, which stream is the data stored in the payload, whether it is video data or audio data, and which stream has multiple video data or audio data respectively ID (stream_id) for discriminating whether the data is, and Decode Time Stamp (DTS) and Presentation Time Stamp (PTS) which are time stamps which are decoding and display time information of the payload.

DTSおよびPTSは必ずしも全てのパケットヘッダに記録されている訳ではなく、MPEGによって記録するルールが規定されている。ルールの詳細についてはMPEGシステム(ISO/IEC13818−1)規格書に記述されているので省略する。   DTS and PTS are not necessarily recorded in all packet headers, but rules for recording in MPEG are defined. Details of the rules are described in the MPEG system (ISO / IEC13818-1) standard, and therefore will be omitted.

パケットには更にヘッダ(パックヘッダ)が付けられ、パックを構成する。パックヘッダには、当該パックがいつデマルチプレクサ310を通過し、個々のエレメンタリストリームのデコーダバッファに入力されるかを示すタイムスタンプであるSystem Clock Reference(SCR)が記録されている。   The packet is further provided with a header (pack header) to form a pack. In the pack header, System Clock Reference (SCR), which is a time stamp indicating when the pack passes through the demultiplexer 310 and is input to the decoder buffer of each elementary stream, is recorded.

(VOBのインターリーブ記録)
図11及び図12を用いてVOBファイルのインターリーブ記録について説明する。
(VOB interleaved recording)
The interleaved recording of the VOB file will be described with reference to FIGS.

図11は、AVデータとBD−ROMプレーヤの構成との関係を説明するための図である。   FIG. 11 is a diagram for explaining the relationship between AV data and the configuration of a BD-ROM player.

図11上段の図は、図7を用いて前述したプレーヤ構成図の一部である。図の通り、BD−ROM上のデータは、光ピックアップ202を通してVOB即ちMPEGストリームであればトラックバッファ309へ入力され、PNG即ちイメージデータであればイメージメモリ308へと入力される。   The upper part of FIG. 11 is a part of the player configuration diagram described above with reference to FIG. As shown in the drawing, the data on the BD-ROM is input to the track buffer 309 if it is a VOB or MPEG stream through the optical pickup 202, and is input to the image memory 308 if it is PNG or image data.

トラックバッファ309はFirst−In First−Out(FIFO)であり、入力されたVOBのデータは入力された順にデマルチプレクサ310へと送られる。この時、前述したSCRに従って個々のパックはトラックバッファ309から引き抜かれデマルチプレクサ310を介してビデオプロセッサ312またはサウンドプロセッサ313へとデータが送り届けられる。   The track buffer 309 is a First-In First-Out (FIFO), and the input VOB data is sent to the demultiplexer 310 in the input order. At this time, each pack is extracted from the track buffer 309 according to the SCR described above, and data is sent to the video processor 312 or the sound processor 313 via the demultiplexer 310.

一方で、イメージデータの場合は、どのイメージを描画するかはプレゼンテーションコントローラ306(図7参照)によって指示される。また、描画に使ったイメージデータは、字幕用イメージデータの場合は同時にイメージメモリ308から削除されるが、メニュー用のイメージデータの場合は、イメージメモリ308内にそのまま残される。   On the other hand, in the case of image data, the presentation controller 306 (see FIG. 7) indicates which image to draw. Further, the image data used for drawing is deleted from the image memory 308 at the same time in the case of subtitle image data, but in the case of menu image data, it remains in the image memory 308 as it is.

これはメニューの描画はユーザ操作に依存するところがあるため、同一イメージを複数回描画する可能性があるためである。   This is because menu drawing may depend on user operations, and the same image may be drawn multiple times.

図11下段の図は、BD−ROM上でのVOBファイル及びPNGファイルのインターリーブ記録を示す図である。   The lower diagram in FIG. 11 is a diagram showing interleaved recording of a VOB file and a PNG file on a BD-ROM.

一般的にROM、例えばCD−ROMやDVD−ROMの場合、一連の連続再生単位となるAVデータは連続記録されている。連続記録されている限り、ドライブは順次データを読み出しプレーヤ側に送り届けるだけでよい。   In general, in the case of a ROM such as a CD-ROM or a DVD-ROM, AV data serving as a series of continuous reproduction units is continuously recorded. As long as data is continuously recorded, the drive only needs to read out data sequentially and send it to the player side.

しかしながら、連続再生すべきAVデータが分断されてディスク上に離散配置されている場合は、個々の連続区間の間でシーク操作が入ることになり、この間データの読み出しが止まることになる。つまり、データの供給が止まる可能性がある。   However, when AV data to be continuously reproduced is divided and discretely arranged on the disc, a seek operation is performed between individual continuous sections, and data reading is stopped during this period. That is, there is a possibility that the supply of data may stop.

BD−ROMの場合も同様に、VOBファイルは連続領域に記録することができる方が望ましいが、例えば字幕データのようにVOBに記録されている映像データと同期して再生されるデータがあり、VOBファイルと同様に字幕データも何らかの方法によってBD−ROMから読み出す事が必要になる。   Similarly, in the case of a BD-ROM, it is desirable that the VOB file can be recorded in a continuous area. However, there is data that is reproduced in synchronization with video data recorded in the VOB, such as subtitle data. Similar to the VOB file, it is necessary to read the caption data from the BD-ROM by some method.

字幕データの読み出し方法の一手段として、VOBの再生開始前に一まとめで字幕用のイメージデータ(PNGファイル)を読み出してしまう方法がある。しかしながら、この場合には一時記録に使用する大量のメモリが必要となり、現実的ではない。   As one method of reading subtitle data, there is a method of reading subtitle image data (PNG file) all at once before the start of VOB reproduction. However, in this case, a large amount of memory used for temporary recording is required, which is not realistic.

そこで、本実施の形態では、VOBファイルを幾つかのブロックに分けて、VOBファイルとイメージデータとをインターリーブ記録する方式を使用する。   Therefore, in this embodiment, a method is used in which the VOB file is divided into several blocks and the VOB file and image data are recorded in an interleaved manner.

図11下段はそのインターリーブ記録を説明するための図である。VOBファイルとイメージデータを適切にインターリーブ配置することで、前述したような大量の一時記録メモリ無しに、必要なタイミングでイメージデータをイメージメモリ308に格納することが可能になる。   The lower part of FIG. 11 is a diagram for explaining the interleaved recording. By appropriately interleaving the VOB file and the image data, it becomes possible to store the image data in the image memory 308 at a necessary timing without the large amount of temporary recording memory as described above.

しかしながらイメージデータを読み出している際には、VOBデータの読み込みは当然のことながら停止することになる。   However, when reading the image data, the reading of the VOB data is naturally stopped.

図12は、上記のインターリーブ記録における問題を解決するトラックバッファ309を使ったVOBデータ連続供給モデルを説明するための図である。   FIG. 12 is a diagram for explaining a VOB data continuous supply model using the track buffer 309 that solves the problem in the interleave recording.

既に説明したように、VOBのデータは、一旦トラックバッファ309に蓄積される。トラックバッファ309へのデータ入力レートをトラックバッファ309からのデータ出力レートより高く設定すると、BD−ROMからデータを読み出し続けている限り、トラックバッファ309のデータ蓄積量は増加をしていくことになる。   As already described, VOB data is temporarily stored in the track buffer 309. If the data input rate to the track buffer 309 is set higher than the data output rate from the track buffer 309, the data storage amount of the track buffer 309 increases as long as data is continuously read from the BD-ROM. .

ここでトラックバッファ309への入力レートをVa、トラックバッファ309からの出力レートをVbとする。図12の上段の図に示すようにVOBの一連続記録領域が論理アドレスの“a1”から“a2”まで続くとする。また、“a2”から“a3”の間は、イメージデータが記録されていて、VOBデータの読み出しが行えない区間であるとする。   Here, the input rate to the track buffer 309 is Va, and the output rate from the track buffer 309 is Vb. As shown in the upper diagram of FIG. 12, it is assumed that a continuous recording area of VOB continues from “a1” to “a2” of logical addresses. Further, it is assumed that the interval between “a2” and “a3” is a section in which image data is recorded and VOB data cannot be read.

図12の下段の図は、トラックバッファ309の蓄積量を示す図である。横軸が時間、縦軸がトラックバッファ309内部に蓄積されているデータ量を示している。時刻“t1”がVOBの一連続記録領域の開始点である“a1”の読み出しを開始した時刻を示している。   The lower part of FIG. 12 is a diagram showing the accumulation amount of the track buffer 309. The horizontal axis indicates time, and the vertical axis indicates the amount of data stored in the track buffer 309. Time “t1” indicates the time when reading of “a1”, which is the starting point of one continuous recording area of the VOB, is started.

この時刻以降、トラックバッファ309にはレートVa−Vbでデータが蓄積されていくことになる。このレートは言うまでもなくトラックバッファ309の入出力レートの差である。時刻“t2”は一連続記録領域の終了点である“a2”のデータを読み込む時刻である。   After this time, data is accumulated in the track buffer 309 at the rate Va-Vb. Needless to say, this rate is the difference between the input and output rates of the track buffer 309. The time “t2” is the time when the data “a2”, which is the end point of one continuous recording area, is read.

即ち時刻“t1”から“t2”の間レートVa−Vbでトラックバッファ309内はデータ量が増加していき、時刻“t2”でのデータ蓄積量B(t2)は下記の(式1)によって求めることができる。   That is, the amount of data in the track buffer 309 increases at the rate Va-Vb from time “t1” to “t2”, and the data storage amount B (t2) at time “t2” is expressed by the following (formula 1). Can be sought.

B(t2) = (Va−Vb)×(t2−t1) (式1)         B (t2) = (Va−Vb) × (t2−t1) (Formula 1)

この後、BD−ROM上のアドレス“a3”まではイメージデータが続くため、トラックバッファ309への入力は0となり、出力レートである“−Vb”でトラックバッファ309内のデータ量は減少していくことになる。このデータ量の減少は読み出し位置“a3”まで、つまり、時刻でいう“t3”まで続く。   Thereafter, since the image data continues until the address “a3” on the BD-ROM, the input to the track buffer 309 becomes 0, and the data amount in the track buffer 309 decreases at the output rate “−Vb”. Will go. This decrease in the data amount continues until the read position “a3”, that is, until “t3” in terms of time.

ここで大事なことは、時刻“t3”より前にトラックバッファ309に蓄積されているデータ量が0になると、デコーダへ供給するVOBのデータが無くなってしまい、VOBの再生がストップしてしまうことである。   What is important here is that when the amount of data stored in the track buffer 309 before time “t3” becomes zero, the VOB data supplied to the decoder is lost, and the reproduction of the VOB stops. It is.

しかしながら、時刻“t3”でトラックバッファ309にデータが残っている場合には、VOBの再生がストップすることなく連続して行われることを意味している。   However, if data remains in the track buffer 309 at time “t3”, it means that VOB playback is continuously performed without stopping.

このVOBの再生がストップすることなく連続して行われるための条件は下記の(式2)によって示すことができる。   The condition for continuously performing the VOB reproduction without stopping can be expressed by the following (Formula 2).

B(t2) ≧ −Vb×(t3−t2) (式2)         B (t2) ≧ −Vb × (t3−t2) (Formula 2)

即ち、(式2)を満たすようにイメージデータの配置を決めればよい事になる。   That is, the arrangement of the image data should be determined so as to satisfy (Equation 2).

(ナビゲーションデータ構造)
図13から図19を用いて、BD−ROMに記録されたナビゲーションデータ(BD管理情報)の構造について説明をする。
(Navigation data structure)
The structure of the navigation data (BD management information) recorded on the BD-ROM will be described with reference to FIGS.

図13は、VOB管理情報ファイル(“YYY.VOBI”)の内部構造を示す図である。   FIG. 13 shows the internal structure of the VOB management information file (“YYY.VOBI”).

VOB管理情報は、当該VOBのストリーム属性情報(Attribute)とタイムマップ(TMAP)とを有している。ストリーム属性情報は、ビデオ属性(Video)、オーディオ属性(Audio#0〜Audio#m)個々に持つ構成となっている。特にオーディオストリームの場合は、VOBが複数本のオーディオストリームを同時に持つことができることから、オーディオストリーム数(Number)によって、オーディオ属性のデータフィールドの数が特定される。   The VOB management information includes stream attribute information (Attribute) and time map (TMAP) of the VOB. The stream attribute information is configured to have video attributes (Video) and audio attributes (Audio # 0 to Audio # m). Particularly in the case of an audio stream, since a VOB can have a plurality of audio streams at the same time, the number of audio attribute data fields is specified by the number of audio streams (Number).

下記はビデオ属性(Video)の持つフィールドとそれぞれが持ち得る値の例である。   The following are examples of fields that the video attribute (Video) has and the values that each can have.

圧縮方式(Coding):
MPEG1
MPEG2
MPEG4
解像度(Resolution):
1920x1080
1280x720
720x480
720x565
アスペクト比(Aspect):
4:3
16:9
フレームレート(Framerate):
60
59.94
50
30
29.97
25
24
Compression method (Coding):
MPEG1
MPEG2
MPEG4
Resolution:
1920x1080
1280x720
720x480
720x565
Aspect ratio (Aspect):
4: 3
16: 9
Frame rate:
60
59.94
50
30
29.97
25
24

下記はオーディオ属性(Audio)の持つフィールドとそれぞれが持ち得る値の例である。   The following are examples of fields that audio attributes (Audio) have and the values that each can have.

圧縮方式(Coding):
AC3
MPEG1
MPEG2
LPCM
チャンネル数(Ch):
1〜8
言語属性(Language):
JPN、ENG、・・・
Compression method (Coding):
AC3
MPEG1
MPEG2
LPCM
Number of channels (Ch):
1-8
Language attribute:
JPN, ENG, ...

タイムマップ(TMAP)はVOBU毎の情報を持つテーブルであって、当該VOBが有するVOBU数(Number)と各VOBU情報(VOBU#1〜VOBU#n)を持つ。   The time map (TMAP) is a table having information for each VOBU, and has the number of VOBUs (Number) possessed by the VOB and each VOBU information (VOBU # 1 to VOBU # n).

個々のVOBU情報は、VOBUの再生時間長(Duration)とVOBUのデータサイズ(Size)とを有している。   Each VOBU information has a playback time length (Duration) of VOBU and a data size (Size) of VOBU.

図14は、VOBU情報の詳細を説明するための図である。   FIG. 14 is a diagram for explaining the details of the VOBU information.

広く知られているように、MPEGストリームは時間的側面とデータサイズとしての側面との2つの物理量についての側面を有している。例えば、音声の圧縮規格であるAudio Code number 3(AC3)は固定ビットレートでの圧縮を行っているため、時間とアドレスとの関係は1次式によって求めることができる。   As is widely known, an MPEG stream has two physical aspects, a temporal aspect and a data size aspect. For example, since Audio Code number 3 (AC3), which is an audio compression standard, performs compression at a fixed bit rate, the relationship between time and address can be obtained by a linear expression.

しかしながらMPEGビデオデータの場合、個々のフレームは固定の表示時間、例えばNTSCの場合、1フレームは1/29.97秒の表示時間を持つが、個々のフレームの圧縮後のデータサイズは絵の特性や圧縮に使ったピクチャタイプ、いわゆるI/P/Bピクチャによってデータサイズは大きく変わってくる。   However, in the case of MPEG video data, each frame has a fixed display time, for example, in the case of NTSC, one frame has a display time of 1 / 29.97 seconds, but the compressed data size of each frame is a characteristic of the picture. Depending on the picture type used for compression or so-called I / P / B picture, the data size varies greatly.

従って、MPEGビデオの場合は、時間とアドレスとの関係は一般式の形で表現することは不可能である。   Therefore, in the case of MPEG video, the relationship between time and address cannot be expressed in a general form.

当然の事として、MPEGビデオデータを多重化しているMPEGストリーム、即ちVOBについても、時間とデータとを一般式の形で表現することは不可能である。   As a matter of course, it is impossible to express time and data in the form of a general formula even for an MPEG stream in which MPEG video data is multiplexed, that is, a VOB.

これに代わって、VOB内での時間とアドレスとの関係を結びつけるのがタイムマップ(TMAP)である。図14に示すように、VOBU毎にVOBU内のフレーム数と、VOBU内のパック数とをそれぞれエントリとして持つテーブルがタイムマップ(TMAP)である。   Instead, the time map (TMAP) links the relationship between time and address in the VOB. As shown in FIG. 14, a table having the number of frames in the VOBU and the number of packs in the VOBU as entries for each VOBU is a time map (TMAP).

図15を使って、タイムマップ(TMAP)の使い方を説明する。   The usage of the time map (TMAP) will be described with reference to FIG.

図15は、タイムマップを使ったアドレス情報取得方法を説明するための図である。   FIG. 15 is a diagram for explaining an address information acquisition method using a time map.

図15に示すように時刻情報(Time)が与えられた場合、まずは当該時刻がどのVOBUに属するのかを検索する。具体的には、タイムマップのVOBU毎のフレーム数を加算して行き、フレーム数の和が、当該時刻をフレーム数に換算した値を超えるまたは一致するVOBUが当該時刻に対応するVOBUになる。   As shown in FIG. 15, when time information (Time) is given, first, it is searched to which VOBU the time belongs. Specifically, the number of frames for each VOBU in the time map is added, and a VOBU whose sum of frames exceeds or matches the value obtained by converting the time into the number of frames becomes the VOBU corresponding to the time.

次に、タイムマップのVOBU毎のサイズを当該VOBUの直前のVOBUまで加算して行き、その値が与えられた時刻を含むフレームを再生するために読み出すべきパックの先頭アドレス(Address)になっている。   Next, the size of each VOBU in the time map is added to the VOBU immediately before the VOBU, and the value becomes the leading address (Address) of the pack to be read in order to reproduce the frame including the given time. Yes.

このようにして、MPEGストリームにおいて、与えられた時刻情報に対応するアドレスを得ることができる。   In this way, an address corresponding to given time information can be obtained in the MPEG stream.

次に図16を使って、プレイリスト(“XXX.PL”)の内部構造を説明する。   Next, the internal structure of the playlist (“XXX.PL”) will be described using FIG.

図16は、プレイリストの構成を示す図である。   FIG. 16 is a diagram showing the configuration of a playlist.

プレイリストは、セルリスト(CellList)とイベントリスト(EventList)とから構成されている。   The playlist includes a cell list (CellList) and an event list (EventList).

セルリスト(CellList)は、プレイリスト内の再生セルシーケンスを示す情報であり、本リストの記述順でセルが再生される事になる。   The cell list (CellList) is information indicating a reproduction cell sequence in the playlist, and the cells are reproduced in the description order of the list.

セルリスト(CellList)の中身は、セルの数(Number)と各セル情報(Cell#1〜Cell#n)である。   The contents of the cell list (CellList) are the number of cells (Number) and cell information (Cell # 1 to Cell # n).

各セル情報(Cell#〜Cell#n)は、VOBファイル名(VOBName)、当該VOB内での有効区間開始時刻(In)及び有効区間終了時刻(Out)と、字幕テーブル(SubtitleTable)を持っている。   Each cell information (Cell # to Cell # n) has a VOB file name (VOBName), a valid section start time (In) and a valid section end time (Out) in the VOB, and a caption table (SubtitleTable). Yes.

有効区間開始時刻(In)及び有効区間終了時刻(Out)は、それぞれ当該VOB内でのフレーム番号で表現され、前述したタイムマップ(TMAP)を使うことによって再生に必要なVOBデータのアドレスを得る事ができる。   The valid section start time (In) and valid section end time (Out) are each expressed by a frame number in the VOB, and the address of VOB data necessary for reproduction is obtained by using the time map (TMAP) described above. I can do things.

字幕テーブル(SubtitleTable)は、当該VOBと同期再生される字幕情報を持つテーブルである。字幕は音声同様に複数の言語を持つことができ、字幕テーブル(SubtitleTable)は言語数(Number)とそれに続く個々の言語ごとのテーブル(Language#1〜Language#k)とから構成されている。   The caption table (SubtitleTable) is a table having caption information that is reproduced in synchronization with the VOB. Subtitles can have a plurality of languages like audio, and a subtitle table (SubtitleTable) is composed of the number of languages (Number) followed by tables for each language (Language # 1 to Language #k).

各言語のテーブル(Language#1〜Language#k)は、言語情報(Language)と、表示される字幕の字幕情報数(Number)と、表示される字幕の字幕情報(Speech#1〜Speech#j)とから構成され、各字幕情報(Speech#1〜Speech#j)は対応するイメージデータファイル名(Name)、字幕表示開始時刻(In)及び字幕表示終了時刻(Out)と、字幕の表示位置(Position)とから構成されている。   Each language table (Language # 1 to Language # k) includes language information (Language), the number of subtitle information to be displayed (Number), and subtitle information to be displayed (Speech # 1 to Speech # j). Each subtitle information (Speech # 1 to Speech # j) includes a corresponding image data file name (Name), subtitle display start time (In), subtitle display end time (Out), and subtitle display position. (Position).

イベントリスト(EventList)は、当該プレイリスト内で発生するイベントを定義したテーブルである。イベントリストは、イベント数(Number)に続いて個々のイベント(Event#1〜Event#m)とから構成され、各イベント(Event#1〜Event#m)は、イベントの種類(Type)、イベントのID(ID)、イベント生成時刻(Time)と有効期間(Duration)とから構成されている。   The event list (EventList) is a table that defines events that occur in the play list. The event list is composed of the number of events (Number) followed by individual events (Event # 1 to Event # m), and each event (Event # 1 to Event # m) includes an event type (Type) and an event ID (ID), event generation time (Time), and validity period (Duration).

図17は、個々のプレイリスト毎のイベントハンドラ(時間イベントと、メニュー選択用のユーザイベント)を持つイベントハンドラテーブル(“XXX.PROG”)の構成を示す図である。   FIG. 17 is a diagram showing the configuration of an event handler table (“XXX.PROG”) having event handlers (time events and user events for menu selection) for each playlist.

イベントハンドラテーブルは、定義されているイベントハンドラ/プログラム数(Number)と個々のイベントハンドラ/プログラム(Program#1〜Program#n)を有している。   The event handler table has a defined number of event handlers / programs (Number) and individual event handlers / programs (Program # 1 to Program # n).

各イベントハンドラ/プログラム(Program#1〜Program#n)内の記述は、イベントハンドラ開始の定義(<event_handler>タグ)と前述したイベントのIDと対になるイベントハンドラのID(event_handler id)を持ち、その後に当該プログラムが“function”に続く括弧“{”と“}”との間に記述される。   The description in each event handler / program (Program # 1 to Program # n) has an event handler start definition (<event_handler> tag) and an event handler ID (event_handler id) that is paired with the event ID described above. Then, the program is described between parentheses “{” and “}” following “function”.

次に図18を用いてBD−ROM全体に関する情報(“BD.INFO”)の内部構造について説明をする。   Next, the internal structure of information (“BD. INFO”) relating to the entire BD-ROM will be described with reference to FIG.

図18は、BD−ROM全体情報であるBD.INFOの構成を示す図である。   FIG. 18 is a diagram showing BD. It is a figure which shows the structure of INFO.

BD−ROM全体情報は、タイトルリスト(TitleList)とグローバルイベント用のイベントリスト(EventList)とから構成されている。   The entire BD-ROM information includes a title list (TitleList) and an event list for global events (EventList).

タイトルリスト(TitleList)は、ディスク内のタイトル数(Number)と、これに続く各タイトル情報(Title#1〜Title#n)とから構成されている。   The title list (TitleList) is composed of the number of titles (Number) in the disc and the following pieces of title information (Title # 1 to Title # n).

各タイトル情報(Title#1〜Title#n)は、タイトルに含まれるプレイリストのテーブル(PLTalble)とタイトル内のチャプターリスト(ChapterList)とを含んでいる。プレイリストのテーブル(PLTable)はタイトル内のプレイリストの数(Number)と、プレイリスト名(Name)即ちプレイリストのファイル名を有している。   Each piece of title information (Title # 1 to Title # n) includes a playlist table (PLTable) included in the title and a chapter list (ChapterList) in the title. The playlist table (PLTable) has the number of playlists in the title (Number) and the playlist name (Name), that is, the playlist file name.

チャプターリスト(ChapterList)は、当該タイトルに含まれるチャプター数(Number)と各チャプター情報(Chapter#1〜Chapter#n)とから構成され、各チャプター情報(Chapter#1〜Chapter#n)は当該チャプターが含むセルのテーブル(CellTable)を持ち、セルのテーブル(CellTable)はセル数(Number)と各セルのエントリ情報(CellEntry#1〜CellEntry#k)とから構成されている。   The chapter list (ChapterList) is composed of the number of chapters (Number) included in the title and each chapter information (Chapter # 1 to Chapter # n), and each chapter information (Chapter # 1 to Chapter # n) is related to the chapter. The cell table (CellTable) includes a cell number (Number) and entry information (CellEntry # 1 to CellEntry # k) of each cell.

セルのエントリ情報(CellEntry#1〜CellEntry#k)は当該セルを含むプレイリスト名と、プレイリスト内でのセル番号によって記述されている。   Cell entry information (CellEntry # 1 to CellEntry # k) is described by the name of the playlist including the cell and the cell number in the playlist.

イベントリスト(EventList)は、グローバルイベントの数(Number)と各グローバルイベントの情報(Event#1〜Event#m)とを持っている。ここで注意すべきは、最初に定義されるグローバルイベントは、ファーストイベント(FirstEvent)と呼ばれ、BD−ROMがプレーヤに挿入された時、最初に実行されるイベントである。   The event list (EventList) includes the number of global events (Number) and information on each global event (Event # 1 to Event # m). It should be noted here that the first defined global event is called a first event (FirstEvent), and is the event that is executed first when the BD-ROM is inserted into the player.

各グローバルイベントの情報(Event#1〜Event#m)はイベントタイプ(Type)とイベントのID(ID)だけを持っている。   Each global event information (Event # 1 to Event # m) has only an event type (Type) and an event ID (ID).

図19は、グローバルイベントハンドラテーブル(“BD.PROG”)の構成を示す図である。本テーブルは、図17で説明したイベントハンドラテーブルと同一内容であり、その説明は省略する。   FIG. 19 is a diagram showing the structure of the global event handler table (“BD.PROG”). This table has the same contents as the event handler table described in FIG. 17, and a description thereof will be omitted.

(イベント発生のメカニズム)
図20から図22を使ってイベント発生のメカニズムについて説明する。
(Event generation mechanism)
The event generation mechanism will be described with reference to FIGS.

図20は、タイムイベントの例を示す図である。   FIG. 20 is a diagram illustrating an example of a time event.

前述したとおり、タイムイベントはプレイリスト(“XXX.PL”)のイベントリスト(EventList)で定義される。   As described above, the time event is defined by the event list (EventList) of the play list (“XXX.PL”).

タイムイベントとして定義されているイベント、即ちイベントタイプ(Type)が“TimeEvent”の場合、イベント生成時刻(“t1”)になった時点で、ID“Ex1”を持つタイムイベントがシナリオプロセッサ305からプログラムプロセッサ302に対して出力される。   When an event defined as a time event, that is, when the event type (Type) is “TimeEvent”, the time event having the ID “Ex1” is programmed from the scenario processor 305 when the event generation time (“t1”) is reached. Output to the processor 302.

プログラムプロセッサ302は、イベントID“Ex1”を持つイベントハンドラを探し、対象のイベントハンドラを実行処理する。例えば、本実施の形態の場合では、2つのボタンイメージの描画を行うことなどが可能である。   The program processor 302 searches for an event handler having the event ID “Ex1” and executes the target event handler. For example, in the case of this embodiment, it is possible to draw two button images.

図21は、ユーザのメニュー操作によるユーザイベントの例を示す図である。   FIG. 21 is a diagram illustrating an example of a user event by a user's menu operation.

前述したとおり、メニュー操作によるユーザイベントもプレイリスト(“XXX.PL”)のイベントリスト(EventList)で定義される。   As described above, user events due to menu operations are also defined in the event list (EventList) of the play list (“XXX.PL”).

ユーザイベントとして定義されるイベント、即ちイベントタイプ(Type)が“UserEvent”の場合、イベント生成時刻(“t1”)になった時点で、当該ユーザイベントがレディとなる。この時、イベント自身は未だ生成されてはいない。   When the event defined as the user event, that is, the event type (Type) is “UserEvent”, the user event becomes ready when the event generation time (“t1”) is reached. At this time, the event itself has not yet been generated.

当該イベントは、有効規格情報(Duration)で記される期間(“T1”)レディ状態にある。   The event is in a ready state for a period (“T1”) described by valid standard information (Duration).

図21に示すように、ユーザによりリモコンキーの「上」「下」「左」「右」キーのいずれかのキー、または「決定」キーが押された場合、まずUOイベントがUOマネージャ303によって生成されプログラムプロセッサ302に出力される。   As shown in FIG. 21, when the user presses one of the “up”, “down”, “left”, “right” keys or “enter” key of the remote control key, the UO event is first sent by the UO manager 303. It is generated and output to the program processor 302.

プログラムプロセッサ302は、シナリオプロセッサ305に対してUOイベントを流し、シナリオプロセッサ305はUOイベントを受け取った時刻に有効なユーザイベントが存在するかを検索する。   The program processor 302 sends a UO event to the scenario processor 305, and the scenario processor 305 searches for a valid user event at the time when the UO event is received.

シナリオプロセッサ305は、検索の結果、対象となるユーザイベントがあった場合、ユーザイベントを生成し、プログラムプロセッサ302に出力する。   When there is a target user event as a result of the search, the scenario processor 305 generates a user event and outputs it to the program processor 302.

プログラムプロセッサ302では、イベントID、例えば、図21に示す例の場合では“Ev1”を持つイベントハンドラを探し、対象のイベントハンドラを実行処理する。本例の場合、プレイリスト#2の再生を開始する。   The program processor 302 searches for an event handler having an event ID, for example, “Ev1” in the case of the example shown in FIG. 21, and executes the target event handler. In this example, playback of playlist # 2 is started.

生成されるユーザイベントには、どのリモコンキーがユーザによって押されたかの情報は含まれていない。選択されたリモコンキーの情報は、UOイベントによってプログラムプロセッサ302に伝えられ、仮想プレーヤが持つレジスタに記録保持される。   The generated user event does not include information on which remote control key is pressed by the user. Information on the selected remote control key is transmitted to the program processor 302 by a UO event, and is recorded and held in a register of the virtual player.

イベントハンドラのプログラムは、このレジスタの値を調べ、分岐処理を実行することが可能である。   The event handler program can check the value of this register and execute branch processing.

図22は、グローバルイベントの例を示す図である。   FIG. 22 is a diagram illustrating an example of a global event.

前述のように、グローバルイベントはBD−ROM全体情報(“BD.INFO”)のイベントリスト(EventList)で定義される。   As described above, the global event is defined in the event list (EventList) of the entire BD-ROM information (“BD. INFO”).

グローバルイベントとして定義されるイベント、即ちイベントタイプ(Type)が“GlobalEvent”であるイベントは、ユーザのリモコンキー操作があった場合にのみ生成される。   An event defined as a global event, that is, an event whose event type (Type) is “GlobalEvent” is generated only when a user performs a remote control key operation.

ユーザによりメニューキーが押された場合、先ずUOイベントがUOマネージャ303によって生成されプログラムプロセッサ302に出力される。プログラムプロセッサ302は、シナリオプロセッサ305に対してUOイベントを流す。   When the menu key is pressed by the user, a UO event is first generated by the UO manager 303 and output to the program processor 302. The program processor 302 sends a UO event to the scenario processor 305.

シナリオプロセッサ305は、該当するグローバルイベントを生成し、プログラムプロセッサ302に送る。プログラムプロセッサ302は、イベントID“menu”を持つイベントハンドラを探し、対象のイベントハンドラを実行する。例えば、図22に示す例の場合、プレイリスト#3の再生を開始している。   The scenario processor 305 generates a corresponding global event and sends it to the program processor 302. The program processor 302 searches for an event handler having the event ID “menu” and executes the target event handler. For example, in the case of the example shown in FIG. 22, playback of the playlist # 3 is started.

本実施の形態では、単にメニューキーと呼んでいるが、DVDを再生するプレーヤにおけるリモコンのように複数のメニューキーがあってもよい。各メニューキーに対応するIDをそれぞれ定義することで各メニューキーに対応する適切な処理が可能である。   In this embodiment, it is simply called a menu key, but there may be a plurality of menu keys like a remote control in a player that plays a DVD. By defining the ID corresponding to each menu key, appropriate processing corresponding to each menu key can be performed.

(仮想プレーヤマシン)
図23は、プログラムプロセッサ302の機能的な構成を説明するための図である。
(Virtual player machine)
FIG. 23 is a diagram for explaining a functional configuration of the program processor 302.

図23を用いてプログラムプロセッサ302の機能的な構成を説明する。   A functional configuration of the program processor 302 will be described with reference to FIG.

プログラムプロセッサ302は、内部に仮想プレーヤマシンを持つ処理モジュールである。仮想プレーヤマシンはBD−ROMとして定義された機能モデルであって、各BD−ROMプレーヤの実装には依存しないものである。即ち、どのBD−ROMプレーヤにおいても同様の機能を実行できることを保証している。   The program processor 302 is a processing module having a virtual player machine inside. The virtual player machine is a functional model defined as a BD-ROM and does not depend on the implementation of each BD-ROM player. That is, it is guaranteed that the same function can be executed in any BD-ROM player.

仮想プレーヤマシンは大きく2つの機能を持っている。プログラミング関数とプレーヤ変数である。プレーヤ変数はレジスタに記憶され保持されている。   The virtual player machine has two functions. Programming functions and player variables. Player variables are stored and held in registers.

プログラミング関数は、Java(登録商標) Scriptをベースとして、以下に記す3つの機能をBD−ROM固有関数として定義している。   The programming function defines the following three functions as BD-ROM specific functions based on Java (registered trademark) Script.

リンク関数:現在の再生を停止し、指定するプレイリスト、セル、時刻からの再生を開始する。     Link function: Stops the current playback and starts playback from the specified playlist, cell, and time.

Link(PL#,Cell#,time)
PL# : プレイリスト名
Cell# : セル番号
time : セル内での再生開始時刻
PNG描画関数:指定PNGデータをイメージプレーン209に描画する
Draw(File,X,Y)
File : PNGファイル名
X : X座標位置
Y : Y座標位置
イメージプレーンクリア関数:イメージプレーン209の指定領域をクリアする
Clear(X,Y,W,H)
X : X座標位置
Y : Y座標位置
W : X方向幅
H : Y方向幅
Link (PL #, Cell #, time)
PL #: Playlist name Cell #: Cell number time: Playback start time in the cell PNG drawing function: draws specified PNG data on the image plane 209 Draw (File, X, Y)
File: PNG file name X: X coordinate position Y: Y coordinate position Image plane clear function: Clear specified area of image plane 209 Clear (X, Y, W, H)
X: X coordinate position Y: Y coordinate position W: X direction width H: Y direction width

また、プレーヤ変数は、プレーヤの設定値等を示すシステムパラメータ(SPRM)と、一般用途として使用可能なゼネラルパラメータ(GPRM)とがある。   The player variables include a system parameter (SPRM) indicating a setting value of the player and a general parameter (GPRM) that can be used for general purposes.

図24は、システムパラメータ(SPRM)の一覧を示す図である。   FIG. 24 is a diagram showing a list of system parameters (SPRM).

SPRM(0) : 言語コード
SPRM(1) : 音声ストリーム番号
SPRM(2) : 字幕ストリーム番号
SPRM(3) : アングル番号
SPRM(4) : タイトル番号
SPRM(5) : チャプター番号
SPRM(6) : プログラム番号
SPRM(7) : セル番号
SPRM(8) : 選択キー情報
SPRM(9) : ナビゲーションタイマー
SPRM(10) : 再生時刻情報
SPRM(11) : カラオケ用ミキシングモード
SPRM(12) : パレンタル用国情報
SPRM(13) : パレンタルレベル
SPRM(14) : プレーヤ設定値(ビデオ)
SPRM(15) : プレーヤ設定値(オーディオ)
SPRM(16) : 音声ストリーム用言語コード
SPRM(17) : 音声ストリーム用言語コード(拡張)
SPRM(18) : 字幕ストリーム用言語コード
SPRM(19) : 字幕ストリーム用言語コード(拡張)
SPRM(20) : プレーヤリージョンコード
SPRM(21) : 予備
SPRM(22) : 予備
SPRM(23) : 再生状態
SPRM(24) : 予備
SPRM(25) : 予備
SPRM(26) : 予備
SPRM(27) : 予備
SPRM(28) : 予備
SPRM(29) : 予備
SPRM(30) : 予備
SPRM(31) : 予備
SPRM (0): Language code SPRM (1): Audio stream number SPRM (2): Subtitle stream number SPRM (3): Angle number SPRM (4): Title number SPRM (5): Chapter number SPRM (6): Program Number SPRM (7): Cell number SPRM (8): Selection key information SPRM (9): Navigation timer SPRM (10): Playback time information SPRM (11): Karaoke mixing mode SPRM (12): Parental country information SPRM (13): Parental level SPRM (14): Player set value (video)
SPRM (15): Player setting value (audio)
SPRM (16): Audio stream language code SPRM (17): Audio stream language code (extended)
SPRM (18): Language code for subtitle stream SPRM (19): Language code for subtitle stream (extended)
SPRM (20): Player region code SPRM (21): Reserve SPRM (22): Reserve SPRM (23): Playback state SPRM (24): Reserve SPRM (25): Reserve SPRM (26): Reserve SPRM (27): Spare SPRM (28): Spare SPRM (29): Spare SPRM (30): Spare SPRM (31): Spare

なお、本実施の形態では、仮想プレーヤのプログラミング関数をJava(登録商標) Scriptベースとしたが、Java(登録商標) Scriptではなく、UNIX(登録商標) OSなどで使われているB−Shellや、Perl Scriptなど他のプログラミング関数であってもよい。言い換えれば、本発明におけるプログラム言語はJava(登録商標) Scriptに限定されるものでは無い。   In this embodiment, the programming function of the virtual player is based on Java (registered trademark) Script. However, instead of Java (registered trademark) Script, B-Shell used in UNIX (registered trademark) OS, etc. Other programming functions such as Perl Script may be used. In other words, the programming language in the present invention is not limited to Java (registered trademark) Script.

(プログラムの例)
図25及び図26は、イベントハンドラにおけるプログラムの例を示す図である。
(Program example)
25 and 26 are diagrams showing examples of programs in the event handler.

図25は、2つの選択ボタンを持つメニュー画面の制御に係るイベントハンドラにおけるプログラムの例を示す図である。   FIG. 25 is a diagram showing an example of a program in an event handler related to control of a menu screen having two selection buttons.

セル(PlayList#1.Cell#1)先頭でタイムイベントを使って図25左側のプログラムが実行される。ここでは、最初にゼネラルパラメータの一つGPRM(0)に“1”がセットされている。GPRM(0)は、当該プログラムの中で、選択されているボタンを識別するのに使っている。最初の状態では、左側に配置するボタン[1]が選択されている状態を初期値として持たされている。   The program on the left side of FIG. 25 is executed using the time event at the head of the cell (PlayList # 1. Cell # 1). Here, “1” is initially set to GPRM (0), one of the general parameters. GPRM (0) is used to identify the selected button in the program. In the initial state, the initial value is a state in which the button [1] arranged on the left side is selected.

次に、PNGの描画を描画関数である“Draw”を使ってボタン[1]、ボタン[2]それぞれについて行っている。ボタン[1]は、座標(10、200)を起点(左上端)としてPNGイメージ“1black.png”を描画している。ボタン[2]は、座標(330,200)を起点(左上端)としてPNGイメージ“2white.png”を描画している。   Next, PNG drawing is performed for each of the button [1] and the button [2] by using a drawing function “Draw”. The button [1] draws the PNG image “1black.png” with the coordinates (10, 200) as the starting point (upper left corner). The button [2] draws the PNG image “2white.png” with the coordinates (330, 200) as the starting point (upper left corner).

また、本セル最後ではタイムイベントを使って図25右側のプログラムが実行される。ここでは、Link関数を使って当該セルの先頭から再度再生するように指定している。   At the end of this cell, the program on the right side of FIG. 25 is executed using a time event. Here, it is specified to play again from the beginning of the cell using the Link function.

図26は、メニュー選択のユーザイベントに係るイベントハンドラにおけるプログラムの例を示す図である。   FIG. 26 is a diagram illustrating an example of a program in an event handler relating to a menu selection user event.

「左」キー、「右」キー、「決定」キー何れかのリモコンキーが押された場合それぞれに対応するプログラムがイベントハンドラに書かれている。ユーザによりリモコンキーが押された場合、図21を用いて説明したように、ユーザイベントが生成され、図26のイベントハンドラが起動されることになる。   When a remote control key of any one of the “left” key, “right” key, and “decision” key is pressed, a corresponding program is written in the event handler. When the user presses the remote control key, as described with reference to FIG. 21, a user event is generated and the event handler of FIG. 26 is activated.

本イベントハンドラでは、選択ボタンを識別しているGPRM(0)の値と、選択されたリモコンキーを識別するSPRM(8)を使って以下のように分岐処理を行っている。   In this event handler, branch processing is performed as follows using the value of GPRM (0) identifying the selection button and SPRM (8) identifying the selected remote control key.

条件1)ボタン[1]が選択されている、かつ、選択キーが「右」キーの場合
GPRM(0)を2に再設定して、選択状態にあるボタンを右のボタン[2]に変更する。
Condition 1) When the button [1] is selected and the selection key is the “right” key: GPRM (0) is reset to 2 and the selected button is changed to the right button [2]. To do.

ボタン[1]、ボタン[2]のイメージをそれぞれ書き換える。     Rewrite the images of button [1] and button [2], respectively.

条件2)選択キーが「決定(OK)」の場合で、ボタン[1]が選択されている場合
プレイリスト#2の再生を開始する。
Condition 2) When the selection key is “OK (OK)” and the button [1] is selected Playback of the playlist # 2 is started.

条件3)選択キーが「決定(OK)」の場合で、ボタン[2]が選択されている場合
プレイリスト#3の再生を開始する。
Condition 3) When the selection key is “OK (OK)” and the button [2] is selected Playback of the playlist # 3 is started.

図26に示すプログラムは、上記のように解釈され実行される。   The program shown in FIG. 26 is interpreted and executed as described above.

(プレーヤ処理フロー)
図27から図30を用いてプレーヤでの処理の流れを説明する。
(Player processing flow)
The flow of processing in the player will be described with reference to FIGS.

図27は、BD−ROMプレーヤにおけるAVデータ再生の基本処理の流れを示すフロー図である。   FIG. 27 is a flowchart showing the flow of basic processing of AV data reproduction in the BD-ROM player.

BD−ROMが挿入されると(S101)、BD−ROMプレーヤは“BD.INFO”の読み込みと解析(S102)、および、“BD.PROG”の読み込み(S103)を実行する。“BD.INFO”及び“BD.PROG”は共に管理情報記録メモリ204に一旦格納され、シナリオプロセッサ305によって解析される。   When the BD-ROM is inserted (S101), the BD-ROM player reads and analyzes "BD.INFO" (S102) and reads "BD.PROG" (S103). Both “BD.INFO” and “BD.PROG” are temporarily stored in the management information recording memory 204 and analyzed by the scenario processor 305.

続いて、シナリオプロセッサ305は、“BD.INFO”ファイル内のファーストイベント(FirstEvent)情報に従い、最初のイベントを生成する(S104)。生成されたファーストイベントは、プログラムプロセッサ302で受け取られ、当該イベントに対応するイベントハンドラを実行処理する(S105)。   Subsequently, the scenario processor 305 generates the first event according to the first event (FirstEvent) information in the “BD.INFO” file (S104). The generated first event is received by the program processor 302, and an event handler corresponding to the event is executed (S105).

ファーストイベントに対応するイベントハンドラには、最初に再生するべきプレイリストを指定する情報が記録されていることが期待される。仮に、プレイリスト再生が指示されていない場合には、プレーヤは何も再生することなく、ユーザイベントを受け付けるのを待ち続けるだけになる(S201でNo)。   It is expected that information specifying a play list to be reproduced first is recorded in the event handler corresponding to the first event. If play list reproduction is not instructed, the player does not reproduce anything and simply waits for a user event to be accepted (No in S201).

UOマネージャ303は、ユーザからのリモコン操作を受け付けると(S201でYes)、プログラムプロセッサ302に対するUOイベントを生成する(S202)。   Upon receiving a remote control operation from the user (Yes in S201), the UO manager 303 generates a UO event for the program processor 302 (S202).

プログラムプロセッサ302は、UOイベントがメニューキーによるものであるかを判別し(S203)、メニューキーの場合(S203でYes)は、シナリオプロセッサ305にUOイベントを流し、シナリオプロセッサ305がユーザイベントを生成する(S204)。プログラムプロセッサ302は生成されたユーザイベントに対応するイベントハンドラを実行処理する(S205)。   The program processor 302 determines whether the UO event is a menu key (S203). If it is a menu key (Yes in S203), the UO event is sent to the scenario processor 305, and the scenario processor 305 generates a user event. (S204). The program processor 302 executes an event handler corresponding to the generated user event (S205).

図28は、BD−ROMプレーヤにおけるプレイリスト再生開始からVOB再生終了までの処理の流れを示すフロー図である。   FIG. 28 is a flowchart showing a processing flow from the start of playlist reproduction to the end of VOB reproduction in the BD-ROM player.

前述したように、ファーストイベントハンドラまたはグローバルイベントハンドラによってプレイリスト再生が開始される(S301)。シナリオプロセッサ305は、再生対象のプレイリスト再生に必要な情報として、プレイリスト“XXX.PL”の読み込みと解析(S302)、および、プレイリストに対応するプログラム情報“XXX.PROG”の読み込みを行う(S303)。   As described above, play list reproduction is started by the first event handler or the global event handler (S301). The scenario processor 305 reads and analyzes the playlist “XXX.PL” and reads program information “XXX.PROG” corresponding to the playlist as information necessary for playback of the playlist to be played back. (S303).

続いてシナリオプロセッサ305は、プレイリストに登録されているセル情報に基づいてセルの再生を開始する(S304)。セル再生は、シナリオプロセッサからプレゼンテーションコントローラ306に対して要求が出される事を意味し、プレゼンテーションコントローラ306はAVデータ再生を開始する(S305)。   Subsequently, the scenario processor 305 starts cell reproduction based on the cell information registered in the playlist (S304). Cell playback means that a request is sent from the scenario processor to the presentation controller 306, and the presentation controller 306 starts AV data playback (S305).

AVデータの再生が開始されると、プレゼンテーションコントローラ306は、再生するセルに対応するVOBの情報ファイル“XXX.VOBI”を読み込み(S402)、解析する。プレゼンテーションコントローラ306は、タイムマップを使って再生開始するVOBUとそのアドレスを特定し、ドライブコントローラ317に読み出しアドレスを指示する。ドライブコントローラ317は対象となるVOBデータ“YYY.VOB”を読み出す(S403)。   When the reproduction of the AV data is started, the presentation controller 306 reads and analyzes the VOB information file “XXX.VOBI” corresponding to the cell to be reproduced (S402). The presentation controller 306 uses the time map to specify the VOBU to start playback and its address, and instructs the drive controller 317 to read out the address. The drive controller 317 reads the target VOB data “YYY.VOB” (S403).

読み出されたVOBデータはデコーダに送られ再生が開始される(S404)。VOB再生は、当該VOBの再生区間が終了するまで続けられ(S405)、終了すると次のセルが存在する場合(S406でYes)、Cellの再生(S304)へ移行する。また、次のセルが無い場合(S406でNo)は、再生に係る処理が終了する。   The read VOB data is sent to the decoder and reproduction is started (S404). The VOB playback is continued until the playback section of the VOB ends (S405). When the next cell exists (Yes in S406), the process proceeds to cell playback (S304). If there is no next cell (No in S406), the process related to reproduction ends.

図29は、AVデータ再生開始後からのイベント処理の流れを示すフロー図である。   FIG. 29 is a flowchart showing the flow of event processing after the start of AV data reproduction.

図29の(A)は、BD−ROMプレーヤにおけるタイムイベントに係る処理の流れを示すフロー図である。   FIG. 29A is a flowchart showing a flow of processing relating to a time event in the BD-ROM player.

なお、BD−ROMプレーヤはイベントドリブン型のプレーヤモデルである。プレイリストの再生を開始すると、タイムイベント系、ユーザイベント系、字幕表示系のイベント処理プロセスがそれぞれ起動され、平行してイベント処理を実行するようになる。   The BD-ROM player is an event-driven player model. When the reproduction of the playlist is started, the event processing processes of the time event system, the user event system, and the caption display system are started, and the event processing is executed in parallel.

BD−ROMプレーヤにおいてプレイリスト再生の再生が開始されると(S501)、プレイリスト再生が終了していないことが確認され(S502でNo)、シナリオプロセッサ305は、タイムイベント発生時刻になったかを確認する(S503)。   When playback of playlist playback is started in the BD-ROM player (S501), it is confirmed that playlist playback has not ended (No in S502), and the scenario processor 305 determines whether the time event occurrence time has come. Confirmation is made (S503).

タイムイベント発生時刻になっている場合(S503でYes)には、シナリオプロセッサ305はタイムイベントを生成する(S504)。プログラムプロセッサ302はタイムイベントを受け取り、イベントハンドラを実行処理する(S505)。   When the time event occurrence time is reached (Yes in S503), the scenario processor 305 generates a time event (S504). The program processor 302 receives the time event and executes the event handler (S505).

また、タイムイベント発生時刻になっていない場合(S503でNo)、および、イベントハンドラの実行処理が終了した場合、プレイリスト再生の終了確認(S502)以降の処理を繰り返す。   If the time event occurrence time has not been reached (No in S503), and if the event handler execution process has been completed, the processes after the playlist playback completion confirmation (S502) are repeated.

また、プレイリスト再生が終了したことが確認されると(S502でYes)、タイムイベント系の処理は強制的に終了する。   When it is confirmed that the play list reproduction has ended (Yes in S502), the time event processing is forcibly ended.

図29の(B)は、BD−ROMプレーヤにおけるユーザイベントに係る処理の流れを示すフロー図である。   FIG. 29B is a flowchart showing a flow of processing relating to a user event in the BD-ROM player.

BD−ROMプレーヤにおいてプレイリストの再生が開始されると(S601)、プレイリスト再生が終了していないことが確認され(S602でNo)、UOマネージャ303は、UOの受け付けがあったかを確認する。   When the reproduction of the playlist is started in the BD-ROM player (S601), it is confirmed that the reproduction of the playlist has not ended (No in S602), and the UO manager 303 confirms whether the UO has been accepted.

UOの受け付けがあった場合(S603でYes)、UOマネージャ303はUOイベントを生成する(S604)。プログラムプロセッサ302はUOイベントを受け取り、そのUOイベントがメニューコールであるかを確認する。   When the UO is received (Yes in S603), the UO manager 303 generates a UO event (S604). The program processor 302 receives the UO event and checks whether the UO event is a menu call.

メニューコールであった場合(S605でYes)、プログラムプロセッサ302はシナリオプロセッサ305にイベントを生成させ(S607)、プログラムプロセッサ302はイベントハンドラを実行処理する(S608)。   If it is a menu call (Yes in S605), the program processor 302 causes the scenario processor 305 to generate an event (S607), and the program processor 302 executes the event handler (S608).

また、UOイベントがメニューコールで無いと判断された場合(S605でNo)、UOイベントはカーソルキーまたは「決定」キーによるイベントである事を示している。この場合、現在時刻がユーザイベント有効期間内であるかをシナリオプロセッサ305が判断し、有効期間内である場合(S606でYes)には、シナリオプロセッサ305がユーザイベントを生成し(S607)、プログラムプロセッサ302が対象のイベントハンドラを実行処理する(S608)。   If it is determined that the UO event is not a menu call (No in S605), it indicates that the UO event is an event by a cursor key or a “decision” key. In this case, the scenario processor 305 determines whether the current time is within the user event valid period, and if it is within the valid period (Yes in S606), the scenario processor 305 generates a user event (S607) The processor 302 executes the target event handler (S608).

また、UO受付が無い場合(S603でNo)、現在時刻がユーザイベント有効期間内にない場合(S606でNo)、および、イベントハンドラの実行処理が終了した場合、プレイリスト再生の終了確認(S602)以降の処理を繰り返す。   Also, when there is no UO reception (No in S603), when the current time is not within the user event valid period (No in S606), and when the event handler execution process is completed, the playlist playback completion confirmation (S602) ) Repeat the subsequent processing.

また、プレイリスト再生が終了したことが確認されると(S602でYes)、ユーザイベント系の処理は強制的に終了する。   When it is confirmed that the play list reproduction has been completed (Yes in S602), the user event processing is forcibly terminated.

図30は、BD−ROMプレーヤにおける字幕データの処理の流れを示すフロー図である。   FIG. 30 is a flowchart showing the processing flow of caption data in the BD-ROM player.

BD−ROMプレーヤにおいてプレイリストの再生が開始されると、プレイリスト再生が終了していないことが確認され(S702でNo)、シナリオプロセッサ305は、字幕表示開始時刻になったかを確認する。字幕表示開始時刻になっている場合(S703でYes)、シナリオプロセッサ305はプレゼンテーションコントローラ306に字幕描画を指示し、プレゼンテーションコントローラ306はイメージプロセッサ311に字幕描画を指示する。イメージプロセッサ311は、その指示に従い字幕をイメージプレーン209に字幕を描画する(S704)。   When the playback of the playlist is started in the BD-ROM player, it is confirmed that the playlist playback has not ended (No in S702), and the scenario processor 305 confirms whether the subtitle display start time has come. When the subtitle display start time is reached (Yes in S703), the scenario processor 305 instructs the presentation controller 306 to draw subtitles, and the presentation controller 306 instructs the image processor 311 to draw subtitles. The image processor 311 draws the caption on the image plane 209 according to the instruction (S704).

また、字幕表示開始時刻になっていない場合(S703でNo)、字幕表示終了時刻であるかを確認する。字幕表示終了時刻であると判断された場合(S705でYes)、プレゼンテーションコントローラ306がイメージプロセッサ311に字幕消去指示を行う。   If it is not the caption display start time (No in S703), it is confirmed whether it is the caption display end time. If it is determined that it is the caption display end time (Yes in S705), the presentation controller 306 instructs the image processor 311 to erase the caption.

イメージプロセッサ311は、その指示に従い描画されている字幕をイメージプレーン209から消去する(S706)。   The image processor 311 deletes the subtitles drawn in accordance with the instruction from the image plane 209 (S706).

また、イメージプロセッサ311による字幕描画(S704)が終了した場合、イメージプロセッサ311による字幕消去(S706)のが終了した場合、および、字幕表示終了時刻でないと判断(S705でNo)された場合、プレイリスト再生の終了確認(S702)以降の処理を繰り返す。   In addition, when the subtitle rendering (S704) by the image processor 311 is completed, the subtitle deletion (S706) by the image processor 311 is completed, and when it is determined that it is not the subtitle display end time (No in S705), play is performed. The processing after the list reproduction end confirmation (S702) is repeated.

また、プレイリスト再生が終了したことが確認されると(S702でYes)、字幕表示系の処理は強制的に終了する。   Further, when it is confirmed that the play list reproduction has been completed (Yes in S702), the caption display processing is forcibly terminated.

以上の動作により、BD−ROMプレーヤは、ユーザの指示またはBD−ROMに記録されているBD管理情報等に基づき、BD−ROMの再生に係る基本的な処理を行う。   With the above operation, the BD-ROM player performs basic processing related to reproduction of the BD-ROM based on a user instruction or BD management information recorded on the BD-ROM.

(実施の形態2)
次に本発明の実施の形態2について説明する。
(Embodiment 2)
Next, a second embodiment of the present invention will be described.

実施の形態2は、BDでの高輝度(HDR:High Dynamic Range)映像情報の記録または再生に関する内容である。実施の形態2は、基本的には実施の形態1に基づくため、実施の形態2において拡張されている部分または異なる部分を中心に、以下、説明する。   The second embodiment relates to recording or reproduction of high luminance (HDR) video information on a BD. Since the second embodiment is basically based on the first embodiment, the following description will be focused on the part that is expanded or different from the second embodiment.

図31は、MPEG−4 AVC(別名H.264)、もしくはHEVC(別名H.265)のような映像符号化方式を用いて高輝度化メタデータを送る方法を説明する図である。ここでは、MPEG−2 Videoでのランダムアクセス性を高めるために用いられたGOP(Group Of Pictures)と同等のピクチャ参照構成から成る単位を、MPEG−4 AVC、もしくはHEVCでのGOPとして、複数のピクチャをグループ化して符号化している。   FIG. 31 is a diagram for explaining a method of sending high brightness metadata using a video encoding method such as MPEG-4 AVC (aka H.264) or HEVC (aka H.265). Here, a unit consisting of a picture reference structure equivalent to GOP (Group Of Pictures) used to improve random accessibility in MPEG-2 Video is defined as a plurality of MPEG-4 AVC or HEVC GOPs. Pictures are grouped and encoded.

図31の(a)は、GOP先頭のピクチャ(first access unit)における複数のNALユニットの符号化順番を示している。GOP先頭のピクチャでは、1つのAU delimiter、1つのSPS、1つ以上のPPS、0個または複数のSEI message、ピクチャを構成する1つ以上のSliceのそれぞれのNALユニットが続いた後、必要に応じてFiller data、End of sequence、End of streamのそれぞれのNALユニットが続く。   FIG. 31A shows the encoding order of a plurality of NAL units in a GOP head picture (first access unit). In the GOP head picture, one AU delimiter, one SPS, one or more PPS, zero or more SEI messages, each NAL unit of one or more Slices that make up the picture, and then necessary In response, each NAL unit of Filler data, End of sequence, and End of stream follows.

SEI message(SEI(s))では、必要に応じて、Buffering period SEI messageに続けて、他の幾つかのSEI messageが続く。例えば、(1)このGOP内のピクチャの参照関係を示したUser data unregistered SEI message(GOP)、(2)このピクチャのClosed Captioning情報を持つUser data unregistered SEI message(CC)、(3)このビデオシーケンス(VOB)内の全てのピクチャの中での最大輝度または最小輝度などの輝度範囲を示す基本的かつ静的な高輝度化メタデータを含むUser data unregistered SEI message(HDRb)、(4)このピクチャもしくはGOP内の全てのピクチャの中での最大輝度または最小輝度などの輝度範囲を示すように、SEI message(HDRb)よりも詳細で動的な高輝度化メタデータを含むUser data unregistered SEI message(HDRe)、などの幾つかのSEI messageが、この順番で符号化されている。   In the SEI message (SEI (s)), a buffering period SEI message is followed by several other SEI messages as necessary. For example, (1) User data unregistered SEI message (GOP) indicating the reference relationship of pictures in this GOP, (2) User data unregistered SEI message (CC) having Closed Captioning information of this picture, (3) This video User data unregistered SEI message (HDRb), including basic and static brightening metadata indicating the luminance range such as maximum luminance or minimum luminance among all pictures in the sequence (VOB), (4) More detailed and dynamic brightening meta data than SEI message (HDRb) to indicate a luminance range such as maximum luminance or minimum luminance among all pictures in a picture or GOP. Several SEI messages, such as User data unregistered SEI message (HDRe) including data, are encoded in this order.

上述のSEI message(HDRb)またはSEI message(HDRe)は、映像情報と一緒に伝送される。これは、マスタリングの際に利用された輝度に関する情報を伝送し、映像情報をデコードした後に得られる各ピクセルごとの輝度値(Y)が、実際にはどの程度の明るさ(cd/m^2)に相当するのかなどの情報を与えるためである。   The SEI message (HDRb) or SEI message (HDRe) described above is transmitted together with video information. This is because the luminance value (Y) for each pixel obtained after transmitting the information about the luminance used in the mastering and decoding the video information is actually the brightness (cd / m ^ 2). This is for giving information such as

例えば、ビデオをデコードした結果、輝度値(Y)が1000の値を持つピクセルのマスタリング時の輝度は5000cd/m^2だった、といったピクセルの持つ輝度とマスタリング時の輝度との相関情報などが、上述のSEI message(HDRb)またはSEI message(HDRe)に含まれる。また、プレーヤに接続したTVが表現できる最高輝度(cd/m^2)が取得された場合、ピクチャ全体の輝度方向のダイナミックレンジを変更するための情報を、上述のSEI message(HDRb)またはSEI message(HDRe)に持たせてもよい。   For example, as a result of decoding video, a pixel having a luminance value (Y) of 1000 has a mastering luminance of 5000 cd / m ^ 2, and correlation information between the luminance of the pixel and the mastering luminance is obtained. , Included in the aforementioned SEI message (HDRb) or SEI message (HDRe). When the maximum luminance (cd / m ^ 2) that can be expressed by the TV connected to the player is acquired, information for changing the dynamic range in the luminance direction of the entire picture is used as the above-described SEI message (HDRb) or SEI. A message (HDRe) may be included.

SEI message(HDRb)は、HDRビデオシーケンスであることを示すためにピクチャ単位もしくはGOP単位で伝送されるSEI messageであり、ビデオシーケンス(VOB)全体の静的な輝度に関する情報を伝送している。ここで言うHDRビデオシーケンスとは、SEI message(HDRb)が記録されているビデオシーケンスのこととする。   The SEI message (HDRb) is an SEI message transmitted in units of pictures or GOPs to indicate that it is an HDR video sequence, and transmits information on the static luminance of the entire video sequence (VOB). The HDR video sequence referred to here is a video sequence in which SEI message (HDRb) is recorded.

より詳細でかつ動的な輝度に関する情報を伝送するSEI message(HDRe)は、HDRビデオシーケンスに記録されている必要はなく、HDRビデオシーケンス中に1つも存在しなくてもよい。また、SEI message(HDRe)は、存在する場合には、必ずSEI message(HDRb)の直後に符号化されるSEI messageであり、ピクチャ単位もしくはGOP単位で輝度に関する情報を伝送している。   The SEI message (HDRe) that transmits more detailed and dynamic luminance-related information does not need to be recorded in the HDR video sequence, and there may not be any one in the HDR video sequence. Further, the SEI message (HDRe) is an SEI message that is always encoded immediately after the SEI message (HDRb), if present, and transmits information on luminance in units of pictures or GOPs.

図31の(b)は、GOP先頭のピクチャではないピクチャ(non−first access unit)における複数のNALユニットの符号化順番を示している。GOP先頭でないピクチャでは、1つのAU delimiter、0個または1個のPPS、0個または複数のSEI message、ピクチャを構成する1つ以上のSliceのそれぞれのNALユニットが続く。さらにその後に、必要に応じて、Filler data、End of sequence、End of streamのそれぞれのNALユニットが続く。   FIG. 31B shows the encoding order of a plurality of NAL units in a picture (non-first access unit) that is not the GOP head picture. In a picture that is not the head of a GOP, one AU delimiter, 0 or 1 PPS, 0 or multiple SEI messages, and each NAL unit of one or more slices constituting the picture follow. Further, NAL units of Filler data, End of sequence, and End of stream follow as necessary.

SEI message(HDRb)またはSEI message(HDRe)は、それぞれ上記の情報を格納しており、この図31に示す方法では、ピクチャごとに付与されている。GOP単位で輝度に関する情報を伝送する場合には、SEI message(HDRb)およびSEI message(HDRe)はともにGOP先頭のピクチャのみに付与され、GOP先頭でないピクチャには一切付与されない。   The SEI message (HDRb) or SEI message (HDRe) stores the above information, respectively, and is assigned to each picture in the method shown in FIG. When transmitting information related to luminance in units of GOP, both SEI message (HDRb) and SEI message (HDRe) are assigned only to the GOP head picture, and not to pictures that are not GOP head.

図32は、SEI message(HDRe)まで含むHDRビデオストリームをMPEG−2 TSで多重化する方法を説明する図である。なお、本実施の形態において、シーケンスは、ストリームと同義であってもよく、ストリームの一部であってもよい。1ピクチャ(1フレームまたは1 video access unit)を1PESパケットに格納して、HDRビデオストリームをPES化した後、PID=Xの各TSパケットのペイロードに、PESパケットにおけるデータが分割されて順番に格納される。   FIG. 32 is a diagram for explaining a method of multiplexing an HDR video stream including up to SEI message (HDRe) using MPEG-2 TS. In the present embodiment, the sequence may be synonymous with the stream or may be a part of the stream. One picture (one frame or one video access unit) is stored in one PES packet, and the HDR video stream is converted to PES. Then, the data in the PES packet is divided and stored in the payload of each TS packet with PID = X. Is done.

図32に示す方法の場合、同じPID(PID=X)の各TSパケットに、stream_id=0xE1のPESパケットとされる、SEI message(HDRe)まで含むHDRビデオシーケンスが、分割されて順番に格納される。なお、HDMI(登録商標)でHDRビデオシーケンスを出力する際に、図32に示す方法のように、SEI message(HDRe)の情報が伝送されると、ビデオシーケンス全体からSEI message(HDRe)を検索するための処理が重くなる場合がある。   In the case of the method shown in FIG. 32, the HDR video sequence including the SES message (HDRe), which is a PES packet of stream_id = 0xE1, is divided and stored in order in each TS packet of the same PID (PID = X). The When an HDR video sequence is output by HDMI (registered trademark), if SEI message (HDRe) information is transmitted as in the method shown in FIG. 32, SEI message (HDRe) is searched from the entire video sequence. The processing for doing so may be heavy.

図33は、SEI message(HDRe)まで含むHDRビデオストリームをMPEG−2 TSで多重化する別の方法を説明する図である。1ピクチャ(1フレームまたは1 video access unit)を1PESパケットに格納して、HDRビデオストリームをPES化した後、PID=XとZのそれぞれのTSパケットのペイロードに、PESパケットにおけるデータが分割されて順番に格納される。   FIG. 33 is a diagram for explaining another method of multiplexing an HDR video stream including up to SEI message (HDRe) using MPEG-2 TS. After storing one picture (one frame or one video access unit) in one PES packet and converting the HDR video stream to PES, the data in the PES packet is divided into the payload of each TS packet of PID = X and Z Stored in order.

図33に示す方法の場合、PID=XのTSパケットに、stream_id=0xE1のPESパケットとしてHDRビデオシーケンスが格納され、SEI message(HDRe)のみがPID=ZのTSパケットに単独で格納されている。HDMI(登録商標)でHDRビデオを出力する際に、図33に示す方法のように、SEI message(HDRe)の情報が伝送されると、PID=ZのTSパケットにSEI message(HDRe)のみが格納されている。したがって、SEI message(HDRe)を検索するための処理は軽い。   In the case of the method shown in FIG. 33, the HDR video sequence is stored as a PES packet with stream_id = 0xE1 in the TS packet with PID = X, and only the SEI message (HDRe) is stored alone in the TS packet with PID = Z. . When outputting HDR video with HDMI (registered trademark), if SEI message (HDRe) information is transmitted as shown in FIG. 33, only the SEI message (HDRe) is included in the TS packet of PID = Z. Stored. Therefore, the process for retrieving the SEI message (HDRe) is light.

PID=XのTSパケットで伝送されるHDRビデオシーケンスのみをデコードするのは簡単である。しかし、SEI message(HDRe)までを含んだ更に高輝度な映像再生を行うためには、PID=XとZのそれぞれのTSパケットを同一のTBバッファ(MPEG−2 SystemのT−STDモデルにて使われる前段バッファ)に伝送する追加処理が必要となる。   It is simple to decode only the HDR video sequence transmitted in the TS packet with PID = X. However, in order to perform higher brightness video reproduction including up to SEI message (HDRe), each TS packet of PID = X and Z is transmitted with the same TB buffer (T-STD model of MPEG-2 System). Additional processing to transmit to the pre-stage buffer used) is required.

図34は、SEI message(HDRe)まで含むHDRビデオストリームをMPEG−2 TSで多重化する別の方法を説明する図である。1ピクチャ(1フレームまたは1 video access unit)を分割して3つのPESパケットのそれぞれに格納して、ビデオストリームをPES化する。その後、3つのPESパケットのそれぞれは、必要に応じて分割され、PID=Xの各TSパケットのペイロードに順番に格納される。   FIG. 34 is a diagram for explaining another method of multiplexing an HDR video stream including up to SEI message (HDRe) using MPEG-2 TS. One picture (one frame or one video access unit) is divided and stored in each of three PES packets, and the video stream is converted to PES. Thereafter, each of the three PES packets is divided as necessary, and stored in order in the payload of each TS packet with PID = X.

図34に示す方法の場合、PID=XのTSパケットに、stream_id=0xE1の2つのPESパケットとしてHDRビデオシーケンスが格納される。そして、SEI message(HDRe)のみが、同じstream_id=0xE1ながらPES_priority=0のPESパケットとして、同じPID=XのTSパケットに単独で格納されている。   In the case of the method shown in FIG. 34, an HDR video sequence is stored as two PES packets with stream_id = 0xE1 in a TS packet with PID = X. Only the SEI message (HDRe) is stored alone in the TS packet with the same PID = X as a PES packet with the same stream_id = 0xE1 but with the PES_priority = 0.

HDMI(登録商標)でHDRビデオを出力する際に、図34に示す方法のように、SEI message(HDRe)の情報が伝送されると、PID=Xの各TSパケットから、stream_id=0xE1でPES_priority=0のPESパケットが検索される。したがって、SEI message(HDRe)を検索するための処理は、図33に示す方法のようには軽くはない。   When outputting HDR video with HDMI (registered trademark), if the information of SEI message (HDRe) is transmitted as in the method shown in FIG. 34, PES_priority with stream_id = 0xE1 is transmitted from each TS packet with PID = X. A PES packet with = 0 is retrieved. Therefore, the process for searching for the SEI message (HDRe) is not as light as the method shown in FIG.

しかし、PID=XのTSパケットで伝送されるHDRビデオシーケンスのみをデコードするのも、HDRビデオシーケンスだけでなくSEI message(HDRe)も含めてデコードするのも大きな差異はなく、図34に示す方法は実現可能である。   However, there is no significant difference between decoding only the HDR video sequence transmitted in the TS packet of PID = X and decoding including not only the HDR video sequence but also the SEI message (HDRe). The method shown in FIG. Is feasible.

尚、PES_priorityの値は必ずしもこの組み合わせでなくても良く、SEI message(HDRe)を格納するPESパケットだけがPES_priority=1を取るようにしていても同様の効果を発揮することができる。   Note that the value of PES_priority does not necessarily need to be this combination, and the same effect can be exhibited even if only PES packets storing SEI message (HDRe) take PES_priority = 1.

図35は、SEI message(HDRe)まで含むHDRビデオストリームをMPEG−2 TSで多重化する別の方法を説明する図である。図34に示す方法との違いは、図35に示す方法では、SEI message(HDRe)を含むPESパケットを格納するTSパケットのtransport_priorityが0である点である。   FIG. 35 is a diagram for explaining another method of multiplexing an HDR video stream including up to SEI message (HDRe) using MPEG-2 TS. A difference from the method shown in FIG. 34 is that the transport_priority of the TS packet storing the PES packet including the SEI message (HDRe) is 0 in the method shown in FIG.

HDMI(登録商標)でHDRビデオを出力する際に、図35に示す方法のように、SEI message(HDRe)の情報が伝送されると、PID=Xでtransport_priority=0のTSパケットからSEI message(HDRe)が解析される。したがって、SEI message(HDRe)を検索するため処理量は、図33に示す方法とほぼ同じように軽く、図35に示す方法を実現することは可能である。   When the HDR video is output by HDMI (registered trademark), when the SEI message (HDRe) information is transmitted as in the method shown in FIG. 35, the SEI message (from the TS packet of transport_priority = 0 with PID = X) is transmitted. HDRe) is analyzed. Therefore, the processing amount for searching for the SEI message (HDRe) is almost as light as the method shown in FIG. 33, and the method shown in FIG. 35 can be realized.

また、この場合には、HDRビデオシーケンスのみをデコードするのも、HDRビデオシーケンスだけでなくSEI message(HDRe)も含めてデコードするのも、T−STDモデル上では差異はなく、図35に示す方法を実現することができる。例えば、TSデコーダのPIDデマルチプレクサは、transport_priorityの値にも基づいてストリームを分離する。これにより、SEI message(HDRe)には対応せず、SEI message(HDRb)までの情報を用いて高輝度化するデコーダは、上述のPIDデマルチプレクサによって、SEI message(HDRe)を含むTSパケットを容易に破棄することが可能である。   In this case, there is no difference on the T-STD model between decoding only the HDR video sequence and decoding including not only the HDR video sequence but also the SEI message (HDRe), as shown in FIG. A method can be realized. For example, the PID demultiplexer of the TS decoder separates the stream based also on the value of transport_priority. As a result, a decoder that does not support SEI message (HDRe) and that uses the information up to SEI message (HDRb) to increase the brightness easily allows a TS packet including SEI message (HDRe) to be transmitted using the PID demultiplexer described above. It is possible to destroy it.

尚、transport_priorityの値は必ずしもこの組み合わせでなくても良く、SEI message(HDRe)を格納するTSパケットだけがtransport_priority=1を取るようにしていても同様の効果を発揮することができる。   Note that the value of transport_priority does not necessarily need to be this combination, and the same effect can be achieved even if only TS packets storing SEI message (HDRe) take transport_priority = 1.

図36は、SEI message(HDRe)まで含むHDRビデオストリームをMPEG−2 TSで多重化する別の方法を説明する図である。この図36に示す方法では、図33に示す方法のように、PIDを2種類使い、図34または図35に示す方法のように、PESパケットを構成している。この図36に示す方法は、図33に示す方法と同じような利点と欠点を併せ持つ。   FIG. 36 is a diagram for explaining another method of multiplexing an HDR video stream including up to SEI message (HDRe) using MPEG-2 TS. In the method shown in FIG. 36, two types of PID are used as in the method shown in FIG. 33, and the PES packet is configured as in the method shown in FIG. The method shown in FIG. 36 has the same advantages and disadvantages as the method shown in FIG.

図37は、SEI message(HDRe)まで含むHDRビデオストリームをMPEG−2 TSで多重化する別の方法を説明する図である。この図37に示す方法では、SEI message(HDRe)を、SEI message(HDRb)などが格納されているPESパケットとは別のPESパケットである、PES_priority=0のPESパケットに格納する。そして、スライスNALユニットを格納し終わった後に、PES_priority=0のPESパケットを、PID=XのTSパケットとは別のPID=ZのTSパケットにて多重化している。SEI message(HDRe)の多重化位置はピクチャデータ直後となっている。したがって、図37に示す方法では、SEI message(HDRb)までのHDRビデオシーケンスが1つのPESパケットに格納されている。この点を除き、図37に示す方法は、図33に示す方法と同じような利点と欠点を併せ持つ。   FIG. 37 is a diagram for explaining another method of multiplexing an HDR video stream including up to SEI message (HDRe) using MPEG-2 TS. In the method shown in FIG. 37, the SEI message (HDRe) is stored in a PES packet with PES_priority = 0, which is a PES packet different from the PES packet in which the SEI message (HDRb) or the like is stored. After storing the slice NAL unit, the PES packet with PES_priority = 0 is multiplexed with the TS packet with PID = Z different from the TS packet with PID = X. The multiplexing position of the SEI message (HDRe) is immediately after the picture data. Therefore, in the method shown in FIG. 37, the HDR video sequence up to SEI message (HDRb) is stored in one PES packet. Except for this point, the method shown in FIG. 37 has the same advantages and disadvantages as the method shown in FIG.

図38は、SEI message(HDRe)の代わりに、HDRビデオシーケンスとは別のビデオシーケンスである拡張ビデオシーケンスをMPEG−2 TSで多重化する方法を説明する図である。この図38に示す方法では、SEI message(HDRe)で高輝度拡張メタデータを伝送するのではなく、拡張ビデオシーケンス(Enhancement layer video sequence)を、HDRビデオシーケンス(Base layer video sequence with user data unregistered SEI message(HDRb))に対する拡張映像情報として伝送する。   FIG. 38 is a diagram for explaining a method of multiplexing an extended video sequence, which is a video sequence different from the HDR video sequence, using MPEG-2 TS instead of the SEI message (HDRe). In the method shown in FIG. 38, instead of transmitting high-intensity extended metadata by SEI message (HDRe), an extended video sequence (Enhancement layer video sequence) is converted into an HDR video sequence (Base layer video sequence with user data amount user data amount). message (HDRb)) as extended video information.

例えば、上記HDRビデオシーケンスに含まれるBase frame PES#nの基本ピクチャに対して、拡張ビデオシーケンスに含まれるEnhancement frame PES#nの拡張ピクチャを加える。これにより、HDRビデオシーケンスの高輝度拡張を、SEI messageよりも更に多くのデータを用いながら、より正確に行うことが可能になる。ここで、対応するピクチャ同士は同じPTSを持つようにして、ピクチャ間の相関が示されていても良い。例えば、「基本ピクチャのPTS#b1」=「拡張ピクチャのPTS#e1」を示す相関が示される。   For example, an enhancement frame PES # n extended picture included in the extended video sequence is added to the base frame PES # n basic picture included in the HDR video sequence. This makes it possible to perform the high-brightness extension of the HDR video sequence more accurately while using more data than the SEI message. Here, the corresponding pictures may have the same PTS, and the correlation between the pictures may be indicated. For example, a correlation indicating “PTS # b1 of basic picture” = “PTS # e1 of extended picture” is shown.

上述の基本ビデオシーケンスと拡張ビデオシーケンスとは、夫々全く異なる2本のビデオシーケンスとして異なるPIDで異なるPESパケットでMPEG−2 TSへ多重化される。   The basic video sequence and the extended video sequence are multiplexed into MPEG-2 TS with different PES packets with different PIDs as two different video sequences.

PMTパケットには、基本ビデオシーケンスと拡張ビデオシーケンスとのペアを正しく指定するために、descriptor()を用いてそのペアを表現しても良い。例えば、この図38に示す方法では、PMTパケットの中に、HDR_pairing_descriptor()が記述される。HDR_pairing_descriptor()には、このMPEG−2 TS内のペア数(number_of_HDR_pairs)と、ペアごとの基本ビデオシーケンスと拡張ビデオシーケンスとが用いるPID値とが含まれる。基本ビデオシーケンスが用いるPID値は、base_layer_video_sequence_PIDによって示され、拡張ビデオシーケンスが用いるPID値は、enhancement_layer_video_sequence_PIDによって示される。このようなHDR_pairing_descriptor()が記述されることで、正しいペアの組み合わせを示すことができる。   In the PMT packet, in order to correctly specify a pair of a basic video sequence and an extended video sequence, the pair may be expressed using descriptor (). For example, in the method shown in FIG. 38, HDR_pairing_descriptor () is described in the PMT packet. HDR_pairing_descriptor () includes the number of pairs in the MPEG-2 TS (number_of_HDR_pairs) and PID values used by the basic video sequence and the extended video sequence for each pair. The PID value used by the basic video sequence is indicated by base_layer_video_sequence_PID, and the PID value used by the extended video sequence is indicated by enhancement_layer_video_sequence_PID. By describing such HDR_pairing_descriptor (), a correct pair combination can be indicated.

図39は、ビデオストリーム(YYY.VOB)の管理情報であるYYY.VOBIにてHDRビデオストリームを管理する場合の属性情報を説明する図である。   39 shows YYY.V, which is the management information of the video stream (YYY.VOB). It is a figure explaining the attribute information in the case of managing an HDR video stream by VOBI.

YYY.VOBに含まれるビデオストリームの本数(V_Number)だけ、Videoの属性が、YYY.VOBIの「Attribute」に、ビデオ属性情報として記録される。1本のビデオストリームのビデオ属性情報には、符号化方式(Coding)、空間解像度(Resolution)、アスペクト比(Aspect)、およびフレームレート(Framerate)だけでなく、以下の属性情報が含まれている。   YYY. As many video streams as the number of video streams (V_Number) included in the VOB are YYY. The video attribute information is recorded in “Attribute” of VOBI. The video attribute information of one video stream includes the following attribute information in addition to the encoding method (Coding), spatial resolution (Resolution), aspect ratio (Aspect), and frame rate (Framerate). .

属性情報であるis_HDRは、この属性情報に対応するビデオストリームが、HDRビデオストリームなのか、SDR(Standard Dynamic Range)ビデオストリームなのかを識別する情報である。ここで、is_HDRに、HDRビデオストリームであると記載された場合(つまり、is_HDR=1bの場合)には、以下のHDRに関連する属性情報が続いて記述される。   The attribute information is_HDR is information for identifying whether the video stream corresponding to the attribute information is an HDR video stream or a SDR (Standard Dynamic Range) video stream. Here, when is_HDR is described as an HDR video stream (that is, when is_HDR = 1b), the following attribute information related to HDR is described.

属性情報であるHDR_typeは、この属性情報に対応するビデオストリームの種別、つまりHDRの種別を示す。HDR_typeに含まれる7ビットのうち、最下位の1ビット(b6)が1bの場合は、HDR_typeは、そのビデオストリームが、SEI message(HDRb)を含むHDRビデオストリームであることを示す。また、1つ上位の1ビット(b5)が1bの場合は、HDR_typeは、そのビデオストリームが、SEI message(HDRe)を含む輝度拡張されたHDRビデオストリームであることを示す。また、さらに1つ上位の1ビット(b4)が1bの場合は、HDR_typeは、そのビデオストリームが、SEI message(HDRb)を含む基本ビデオストリームに対する拡張ビデオシーケンスであることを示す。   The attribute information HDR_type indicates the type of video stream corresponding to the attribute information, that is, the type of HDR. Of the 7 bits included in HDR_type, when the least significant bit (b6) is 1b, HDR_type indicates that the video stream is an HDR video stream including SEI message (HDRb). In addition, when the one higher bit (b5) is 1b, HDR_type indicates that the video stream is a brightness-enhanced HDR video stream including SEI message (HDRe). Further, when the one higher bit (b4) is 1b, HDR_type indicates that the video stream is an extended video sequence for the basic video stream including the SEI message (HDRb).

属性情報であるHDR_base_streamは、この属性情報に対応するビデオストリームが、SEI message(HDRe)の輝度拡張されたHDRビデオストリームか、拡張ビデオシーケンスである場合に、基本となるSEI message(HDRb)を含むHDRビデオストリーム(基本ビデオストリーム)を特定する情報である。例えば、その情報は、基本となるSEI message(HDRb)を含むHDRビデオストリーム(基本ビデオストリーム)のTSパケットのPID値を示す。これにより、属性情報に対応するビデオストリームとペアとなる基本ビデオストリームがどのビデオストリームなのかを、ストリームを解析することなく知り、TSデコーダのPIDデマルチプレクサなどの設定を適切に行うことができる。   The attribute information HDR_base_stream includes a basic SEI message (HDRb) when the video stream corresponding to the attribute information is an HDR video stream with enhanced brightness of the SEI message (HDRe) or an extended video sequence. This is information for specifying an HDR video stream (basic video stream). For example, the information indicates a PID value of a TS packet of an HDR video stream (basic video stream) including a basic SEI message (HDRb). Thus, it is possible to know which video stream is the basic video stream paired with the video stream corresponding to the attribute information without analyzing the stream, and to appropriately set the PID demultiplexer of the TS decoder.

属性情報であるMax_luminanceは、その属性情報に対応する、ビデオストリーム(YYY.VOB)内のHDRビデオストリームの、最高輝度(Max_luminance)のピクセル輝度値(Y)を表現し、さらに、その実際の輝度をcd/m^2の単位で表現する。   The attribute information Max_luminance represents the pixel luminance value (Y) of the highest luminance (Max_luminance) of the HDR video stream in the video stream (YYY.VOB) corresponding to the attribute information, and further the actual luminance. Is expressed in units of cd / m ^ 2.

属性情報であるMin_luminanceは、その属性情報に対応する、ビデオストリーム(YYY.VOB)内のHDRビデオストリームの、最低輝度(Min_luminance)のピクセル輝度値(Y)を表現し、さらに、その実際の輝度をcd/m^2の単位で表現する。   The attribute information Min_luminance expresses the pixel luminance value (Y) of the minimum luminance (Min_luminance) of the HDR video stream in the video stream (YYY.VOB) corresponding to the attribute information, and further the actual luminance. Is expressed in units of cd / m ^ 2.

再生装置であるプレーヤは、このビデオ属性情報を解釈することで、再生しようとしているビデオストリームがHDRなのか否かを判定することができる。さらに、プレーヤは、ビデオストリームがHDRであれば、そのHDRはどのようなタイプか、つまり、HDRビデオストリームはどのような符号化方式のHDRビデオストリームなのかを、判定することができる。また、プレーヤは、再生しようとしているビデオストリームに対応する基本HDRビデオストリームの識別情報(PID)と、最高輝度および最低輝度などの輝度範囲を示す情報とを得ることができる。これにより、適切な輝度制御処理を行いながらHDRビデオを再生することができる。   The player as a playback device can determine whether or not the video stream to be played back is HDR by interpreting the video attribute information. Furthermore, if the video stream is HDR, the player can determine what type of HDR, that is, what encoding method the HDR video stream is. Further, the player can obtain identification information (PID) of the basic HDR video stream corresponding to the video stream to be reproduced and information indicating the luminance range such as the maximum luminance and the minimum luminance. Thereby, HDR video can be reproduced while performing appropriate luminance control processing.

図40は、本実施の形態にけるHDRビデオストリームのデコーダモデルを説明する図である。   FIG. 40 is a diagram for explaining an HDR video stream decoder model according to the present embodiment.

SEI message(HDRb)を含むHDRビデオストリームは、基本デコーダ(Base Dec)401にてデコードされる。そして、そのHDRビデオストリームのデコードによって生成された高輝度映像情報は、基本プレーン(Base plane(HDRb))403に展開される。ここで、SEI message(HDRb)に含まれる基本的な輝度情報(コンテンツ全体での最高/最低輝度値によって定義される輝度範囲)などは、その高輝度映像情報と一緒に伝送されて、HDMI(登録商標)などの外部映像出力I/Fへと出力される。   The HDR video stream including the SEI message (HDRb) is decoded by a basic decoder (Base Dec) 401. Then, the high luminance video information generated by decoding the HDR video stream is developed in a basic plane (Base plane (HDRb)) 403. Here, basic luminance information included in the SEI message (HDRb) (luminance range defined by the maximum / minimum luminance value of the entire content) and the like are transmitted together with the high luminance video information, and HDMI ( To an external video output I / F such as a registered trademark.

SEI message(HDRe)に対応したデコーダシステム400は、基本プレーン(Base plane(HDRb))403の高輝度映像情報に対して、SEI message(HDRe)の輝度拡張情報を加えて、HDReプレーン405に拡張高輝度映像情報を展開する。このSEI message(HDRe)までを加えた拡張高輝度映像情報は、SEI message(HDRe)に含まれる追加の輝度情報(シーン単位での最高の輝度値と最低の輝度値によって定義される輝度範囲)などと一緒に、HDMI(登録商標)などの外部映像出力I/Fへと出力される。   The decoder system 400 corresponding to the SEI message (HDRe) extends the HDRe plane 405 by adding luminance extension information of the SEI message (HDRe) to the high luminance video information of the base plane (Base plane (HDRb)) 403. Expand high-luminance video information. The extended high-luminance video information including up to the SEI message (HDRe) is additional luminance information included in the SEI message (HDRe) (luminance range defined by the highest luminance value and the lowest luminance value in each scene). Are output to an external video output I / F such as HDMI (registered trademark).

上述の拡張ビデオシーケンスに対応したデコーダシステム400は、拡張ビデオシーケンスを拡張デコーダ(Enh. Decd)402にてデコードする。そして、そのデコードによって生成された拡張映像情報は、拡張プレーン(Enh. plane)404に展開される。デコーダシステム400は、この拡張映像情報を、基本プレーン(Base plane(HDRb))403の高輝度映像情報と、同じPTSを持つ映像同士で合成する。この合成によって得られた拡張高輝度映像情報は、Base+Enh.プレーン406に展開される。デコーダシステム400は、この拡張高輝度映像情報を、SEI message(HDRb)にて伝送される基本的な輝度情報、または拡張ビデオシーケンス内に格納された輝度拡張情報などと一緒に、HDMI(登録商標)などの外部映像出力I/Fへと出力する。   The decoder system 400 corresponding to the extended video sequence described above decodes the extended video sequence by the extended decoder (Enh. Decd) 402. Then, the extended video information generated by the decoding is developed on an extension plane (Enh. Plane) 404. The decoder system 400 synthesizes this extended video information with the high-luminance video information of the basic plane (Base plane (HDRb)) 403 and videos having the same PTS. The extended high-luminance video information obtained by this synthesis is Base + Enh. The plane 406 is developed. The decoder system 400 uses the HDMI (registered trademark) together with the basic luminance information transmitted in the SEI message (HDRb) or the luminance extension information stored in the extension video sequence. ) And other external video output I / F.

尚、上記の説明は一例に過ぎず、当該技術者にとっては、様々な応用が適用できる。   The above description is merely an example, and various applications can be applied to the engineer.

図41Aは、本実施の形態における再生装置の構成の一例を示すブロック図である。   FIG. 41A is a block diagram illustrating an example of a configuration of a playback device in the present embodiment.

本実施の形態における再生装置100は、符号化された映像情報であるビデオストリームを例えば上述のBDなどの記録媒体200から読み出して再生する装置であって、属性読み出し部110と、復号部120と、出力部130とを備える。   The playback device 100 according to the present embodiment is a device that reads and plays a video stream, which is encoded video information, from the recording medium 200 such as the BD described above, and includes an attribute reading unit 110, a decoding unit 120, and the like. And an output unit 130.

属性読み出し部110は、そのビデオストリームの輝度のダイナミックレンジが、第1のダイナミックレンジか第2のダイナミックレンジかを示す第1の属性情報を、そのビデオストリームに対応付けて記録媒体200に記録されている管理情報ファイルから読み出す。例えば、第1のダイナミックレンジはSDRであり、第2のダイナミックレンジは、そのSDRよりも広いダイナミックレンジであるHDRである。また、管理情報ファイルは、例えば上述のVOBIのファイルであって、その管理情報ファイルに含まれる第1の属性情報は、is_HDRおよびHDR_typeからなる情報である。第1の属性情報に含まれるis_HDRは、そのビデオストリームがSDRかHDRかを示す。   The attribute reading unit 110 records the first attribute information indicating whether the luminance dynamic range of the video stream is the first dynamic range or the second dynamic range on the recording medium 200 in association with the video stream. Read from the management information file. For example, the first dynamic range is SDR, and the second dynamic range is HDR, which is a wider dynamic range than the SDR. The management information file is, for example, the VOBI file described above, and the first attribute information included in the management information file is information including is_HDR and HDR_type. The is_HDR included in the first attribute information indicates whether the video stream is SDR or HDR.

復号部120は、そのビデオストリームを記録媒体200から読み出して復号することにより復号映像情報を生成する。この復号部120は、例えば、図40の基本デコーダ401および拡張デコーダ402などを含む。   The decoding unit 120 generates decoded video information by reading the video stream from the recording medium 200 and decoding it. The decoding unit 120 includes, for example, the basic decoder 401 and the extension decoder 402 shown in FIG.

出力部130は、読み出された第1の属性情報が第2のダイナミックレンジを示す場合、第2のダイナミックレンジに応じたビデオストリームの最高輝度を示す最高輝度情報とともに、生成された復号映像情報を出力する。この出力部130は、例えば、図40に示す構成要素のうち、基本デコーダ401および拡張デコーダ402以外の構成要素を含む。また、ビデオストリームの最高輝度を示す最高輝度情報は、上述のSEI message(HDRb)に含まれる情報、あるいはSEI message(HDRb)およびSEI message(HDRe)に含まれる情報である。   When the read first attribute information indicates the second dynamic range, the output unit 130 generates the generated decoded video information together with the maximum luminance information indicating the maximum luminance of the video stream according to the second dynamic range. Is output. The output unit 130 includes, for example, components other than the basic decoder 401 and the extended decoder 402 among the components shown in FIG. The maximum luminance information indicating the maximum luminance of the video stream is information included in the above-described SEI message (HDRb), or information included in the SEI message (HDRb) and the SEI message (HDRe).

これにより、本実施の形態における再生装置100は、記録媒体200に記録されているビデオストリームの種別(特に、ダイナミックレンジ)に応じた輝度を適切に表現することができる。   Thereby, the playback apparatus 100 according to the present embodiment can appropriately express the luminance according to the type (particularly the dynamic range) of the video stream recorded on the recording medium 200.

また、第1の属性情報は、第2のダイナミックレンジを示す場合、さらに、第2のダイナミックレンジのタイプを示す。つまり、第1の属性情報のうちのHDR_typeは、HDRのタイプを示す。このような場合、出力部130は、第2のダイナミックレンジのタイプに応じた最高輝度情報と復号映像情報とを出力する。   In addition, when the first attribute information indicates the second dynamic range, it further indicates the type of the second dynamic range. That is, HDR_type in the first attribute information indicates the HDR type. In such a case, the output unit 130 outputs the maximum luminance information and the decoded video information corresponding to the second dynamic range type.

具体的には、第1の属性情報によって示されるタイプが、ビデオストリームの輝度範囲が静的に表現されるタイプ(HDRd)である場合、出力部130は、静的に最高輝度を示す最高輝度情報と復号映像情報とを出力する。ここで、その最高輝度情報は、ビデオストリームの全てのピクチャのうちの最高輝度によって定義される輝度範囲を示すことによって、静的に輝度範囲を示す。つまり、出力部130は、上述のSEI message(HDRb)に含まれる情報を最高輝度情報として出力する。   Specifically, when the type indicated by the first attribute information is a type (HDRd) in which the luminance range of the video stream is statically expressed, the output unit 130 statically indicates the highest luminance. Information and decoded video information are output. Here, the maximum luminance information indicates the luminance range statically by indicating the luminance range defined by the highest luminance among all the pictures of the video stream. That is, the output unit 130 outputs information included in the above-described SEI message (HDRb) as the maximum luminance information.

または、第1の属性情報によって示されるタイプが、ビデオストリームの輝度範囲が静的および動的に表現されるタイプ(HDReを含むタイプ)である場合、出力部130は、静的および動的に最高輝度を示す最高輝度情報と復号映像情報とを出力する。ここで、最高輝度情報は、ビデオストリームに含まれる1つまたは複数のピクチャからなるグループごとに、当該グループのうちの最高輝度によって定義される輝度範囲を示すことによって、動的に輝度範囲を示す。複数のピクチャからなるグループは例えばGOPである。つまり、出力部130は、上述のSEI message(HDRb)およびSEI message(HDRe)に含まれる情報を最高輝度情報として出力する。   Alternatively, when the type indicated by the first attribute information is a type in which the luminance range of the video stream is statically and dynamically expressed (including HDRe), the output unit 130 statically and dynamically The highest luminance information indicating the highest luminance and the decoded video information are output. Here, the maximum luminance information indicates the luminance range dynamically by indicating the luminance range defined by the maximum luminance of the group for each group of one or more pictures included in the video stream. . A group composed of a plurality of pictures is a GOP, for example. That is, the output unit 130 outputs information included in the above-described SEI message (HDRb) and SEI message (HDRe) as the maximum luminance information.

また、第1の属性情報によって示されるタイプには、基本ビデオストリームと、その基本ビデオストリームの輝度を拡張するための拡張ビデオストリームとによって、輝度が表現されるタイプがある。このタイプは、上述の拡張ビデオシーケンスを用いるタイプである。第1の属性情報がこのタイプを示す場合、復号部120は、上述のビデオストリームを拡張ビデオストリームとして復号することによって復号映像情報を生成する。さらに、復号部120は、基本ビデオストリームを記録媒体200から読み出して復号することによって基本映像情報を生成する。この場合、出力部130は、最高輝度情報と、生成された基本映像情報を用いて画像処理(例えば合成)された復号映像情報とを出力する。また、このときに出力される最高輝度情報は、上述のSEI message(HDRb)に含まれる情報である。   The type indicated by the first attribute information includes a type in which luminance is expressed by a basic video stream and an extended video stream for extending the luminance of the basic video stream. This type uses the above-described extended video sequence. When the first attribute information indicates this type, the decoding unit 120 generates decoded video information by decoding the above video stream as an extended video stream. Further, the decoding unit 120 generates basic video information by reading and decoding the basic video stream from the recording medium 200. In this case, the output unit 130 outputs the maximum luminance information and decoded video information that has been subjected to image processing (for example, synthesis) using the generated basic video information. The maximum luminance information output at this time is information included in the above-described SEI message (HDRb).

これにより、記録媒体200にどのようなタイプのHDRビデオストリームが記録されていても、そのHDRビデオストリームのタイプに応じた輝度を適切に表現することができる。   Thereby, whatever type of HDR video stream is recorded on the recording medium 200, the luminance according to the type of the HDR video stream can be appropriately expressed.

また、属性読み出し部110は、さらに、ビデオストリームの最高輝度を示す第2の属性情報を、管理情報ファイルから読み出す。第2の属性情報は、例えば上述のMax_luminanceである。このとき、出力部130は、さらに、その第2の属性情報を含む最高輝度情報を出力する。   In addition, the attribute reading unit 110 further reads second attribute information indicating the highest luminance of the video stream from the management information file. The second attribute information is, for example, the above-mentioned Max_luminance. At this time, the output unit 130 further outputs maximum luminance information including the second attribute information.

これにより、ビデオストリームの輝度をより適切に表現することができる。   Thereby, the brightness of the video stream can be expressed more appropriately.

また、本実施の形態における記録媒体200には、上述のビデオストリームと、上述の各属性情報を含む管理情報ファイルとが記録されている。また、ビデオストリームのタイプに応じて基本ビデオストリームが記録されている。   In addition, the above-described video stream and the management information file including the above-described attribute information are recorded on the recording medium 200 in the present embodiment. A basic video stream is recorded according to the type of video stream.

これにより、本実施の形態における記録媒体200は、再生装置に対して、ビデオストリームの種別に応じた輝度を適切に表現させることができる。   Thereby, the recording medium 200 according to the present embodiment can cause the playback apparatus to appropriately express the luminance according to the type of the video stream.

また、HDRビデオストリームには様々な実現方法がありながら、従来では、これら複数の実現方法のHDRビデオストリームを効率的に1つの記録媒体に記録および管理することができなかった。しかし、本実施の形態では、複数のHDRビデオストリームごとに、上述の実現方法を示す属性情報が記録されているため、単一の記録媒体に複数の実現方法のHDRビデオストリームを好適に記録することができる。すなわち、異なる実現方法のHDRビデオストリームを同一のメディア上に効率的に記録および管理することが可能である。さらに、1枚の記録媒体から、TVの高輝度映像表示能力に応じてビデオストリームを選択することもできる。   Further, although there are various implementation methods for HDR video streams, conventionally, it has been impossible to efficiently record and manage the HDR video streams of the plurality of implementation methods on one recording medium. However, in the present embodiment, since the attribute information indicating the above-described implementation method is recorded for each of a plurality of HDR video streams, the HDR video streams of the plurality of implementation methods are preferably recorded on a single recording medium. be able to. That is, it is possible to efficiently record and manage HDR video streams of different implementation methods on the same medium. Furthermore, it is possible to select a video stream from one recording medium according to the high brightness video display capability of the TV.

図41Bは、本実施の形態における再生方法の一例を示すフローチャートである。   FIG. 41B is a flowchart illustrating an example of the reproduction method according to the present embodiment.

本実施の形態における再生方法は、符号化された映像情報であるビデオストリームを記録媒体200から読み出して再生する方法であって、ステップS110、ステップS120およびステップS130を含む。   The reproduction method according to the present embodiment is a method for reading out and reproducing a video stream, which is encoded video information, from the recording medium 200, and includes steps S110, S120, and S130.

ステップS110では、ビデオストリームの輝度のダイナミックレンジが、第1のダイナミックレンジか、第1のダイナミックレンジよりも広い第2のダイナミックレンジかを示す属性情報を、そのビデオストリームに対応付けて記録媒体200に記録されている管理情報ファイルから読み出す。   In step S110, the attribute information indicating whether the dynamic range of the luminance of the video stream is the first dynamic range or the second dynamic range wider than the first dynamic range is associated with the video stream and recorded on the recording medium 200. Is read from the management information file recorded in.

ステップS120では、そのビデオストリームを記録媒体200から読み出して復号することにより復号映像情報を生成する。   In step S120, the video stream is read from the recording medium 200 and decoded to generate decoded video information.

ステップS130では、読み出された属性情報が第2のダイナミックレンジ(つまりHDR)を示す場合、第2のダイナミックレンジに応じたビデオストリームの最高輝度を示す最高輝度情報とともに、復号映像情報を出力する。   In step S130, when the read attribute information indicates the second dynamic range (that is, HDR), the decoded video information is output together with the maximum luminance information indicating the maximum luminance of the video stream corresponding to the second dynamic range. .

これにより、本実施の形態における再生方法では、記録媒体200に記録されているビデオストリームの種別(特に、ダイナミックレンジ)に応じた輝度を適切に表現することができる。   Thereby, in the reproduction method according to the present embodiment, it is possible to appropriately express the luminance according to the type (particularly the dynamic range) of the video stream recorded on the recording medium 200.

なお、上記各実施の形態において、各構成要素は、専用のハードウェアで構成されるか、各構成要素に適したソフトウェアプログラムを実行することによって実現されてもよい。各構成要素は、CPUまたはプロセッサなどのプログラム実行部が、ハードディスクまたは半導体メモリなどの記録媒体に記録されたソフトウェアプログラムを読み出して実行することによって実現されてもよい。ここで、上記各実施の形態の再生装置100などを実現するソフトウェアは、例えば図41Bに示すフローチャートに含まれる各ステップをコンピュータに実行させるプログラムである。   In each of the above embodiments, each component may be configured by dedicated hardware or may be realized by executing a software program suitable for each component. Each component may be realized by a program execution unit such as a CPU or a processor reading and executing a software program recorded on a recording medium such as a hard disk or a semiconductor memory. Here, the software that realizes the playback device 100 of each of the above embodiments is a program that causes a computer to execute each step included in the flowchart shown in FIG. 41B, for example.

以上、一つまたは複数の態様に係る再生装置および再生方法について、実施の形態に基づいて説明したが、本発明は、この実施の形態に限定されるものではない。本発明の趣旨を逸脱しない限り、当業者が思いつく各種変形を本実施の形態に施したものや、異なる実施の形態における構成要素を組み合わせて構築される形態も、本発明の範囲に含まれてもよい。   As mentioned above, although the reproducing | regenerating apparatus and the reproducing | regenerating method which concern on one or some aspect were demonstrated based on embodiment, this invention is not limited to this embodiment. Unless it deviates from the meaning of this invention, the form which carried out the various deformation | transformation which those skilled in the art can think to this embodiment, and the form constructed | assembled combining the component in different embodiment are also contained in the scope of the present invention. Also good.

本発明は、例えばBDなどの記録媒体に記録されているビデオストリームの種別に応じた輝度を適切に表現することができ、例えばBDプレーヤなどの再生装置、および例えばBDなどの光ディスクに利用可能である。   The present invention can appropriately express luminance according to the type of video stream recorded on a recording medium such as a BD, and can be used for a playback device such as a BD player and an optical disc such as a BD. is there.

100 再生装置
104 BDディスク
110 属性読み出し部
120 復号部
130 出力部
200 記録媒体
202 光ピックアップ
203 プログラム記録メモリ
204 管理情報記録メモリ
205 AV記録メモリ
206 プログラム処理部
207 管理情報処理部
208 プレゼンテーション処理部
209 イメージプレーン
210 ビデオプレーン
211 合成処理部
302 プログラムプロセッサ
303 UOマネージャ
304 管理情報記録メモリ
305 シナリオプロセッサ
306 プレゼンテーションコントローラ
307 クロック
308 イメージメモリ
309 トラックバッファ
310 デマルチプレクサ
311 イメージプロセッサ
312 ビデオプロセッサ
313 サウンドプロセッサ
317 ドライブコントローラ
DESCRIPTION OF SYMBOLS 100 Playback apparatus 104 BD disc 110 Attribute reading part 120 Decoding part 130 Output part 200 Recording medium 202 Optical pick-up 203 Program recording memory 204 Management information recording memory 205 AV recording memory 206 Program processing part 207 Management information processing part 208 Presentation processing part 209 Image Plane 210 video plane 211 synthesis processing unit 302 program processor 303 UO manager 304 management information recording memory 305 scenario processor 306 presentation controller 307 clock 308 image memory 309 track buffer 310 demultiplexer 311 image processor 312 video processor 313 sound processor 317 drive controller

Claims (7)

符号化された映像情報であるビデオストリームが記録された記録媒体から前記ビデオストリームを読み出して再生する再生装置であって、
前記ビデオストリームの輝度のダイナミックレンジが、第1のダイナミックレンジか、前記第1のダイナミックレンジよりも広い第2のダイナミックレンジかを示す第1の属性情報を、前記ビデオストリームに対応付けて前記記録媒体に記録されている管理情報ファイルから読み出す属性読み出し部と、
前記ビデオストリームを前記記録媒体から読み出して復号することにより復号映像情報を生成する復号部と、
読み出された前記第1の属性情報が第2のダイナミックレンジを示す場合、前記第2のダイナミックレンジに応じた前記ビデオストリームの最高輝度を示す最高輝度情報と前記復号映像情報を出力する出力部とを備える
再生装置。
A playback device that reads and plays back a video stream from a recording medium on which a video stream that is encoded video information is recorded ,
The attribute information indicating whether the dynamic range of luminance of the video stream is a first dynamic range or a second dynamic range wider than the first dynamic range is associated with the video stream and recorded. An attribute reading unit to read from the management information file recorded on the medium;
A decoding unit that generates decoded video information by reading and decoding the video stream from the recording medium;
If the read out first attribute information indicating a second dynamic range, and outputs the highest luminance information and prior Symbol decoding video information to indicate a maximum brightness of the video stream corresponding to the second dynamic range A playback device comprising an output unit.
前記第1の属性情報は、前記第2のダイナミックレンジを示す場合、さらに、前記第2のダイナミックレンジのタイプを示し、
前記出力部は、前記第2のダイナミックレンジのタイプに応じた前記最高輝度情報と前記復号映像情報とを出力する
請求項1に記載の再生装置。
When the first attribute information indicates the second dynamic range, the first attribute information further indicates a type of the second dynamic range;
The playback device according to claim 1, wherein the output unit outputs the highest luminance information and the decoded video information according to a type of the second dynamic range.
前記第1の属性情報によって示されるタイプが、前記ビデオストリームの輝度範囲を前記ビデオストリームの全てのピクチャのうちの最高輝度によって定義される輝度範囲を示すことによって表現される第1のタイプである場合、
前記出力部は、前記第1のタイプによって最高輝度を示す前記最高輝度情報と前記復号映像情報とを出力する
請求項2に記載の再生装置。
Type indicated by said first attribute information, is the first type represented by showing luminance range defined by the maximum brightness of all the pictures in the brightness range of the video stream the video stream If
The playback device according to claim 2, wherein the output unit outputs the highest luminance information indicating the highest luminance according to the first type and the decoded video information.
前記第1の属性情報によって示されるタイプが、前記ビデオストリームの輝度範囲を、前記ビデオストリームの全てのピクチャのうちの最高輝度および前記ビデオストリームに含まれる1つ又は複数のピクチャからなるグループごとの最高輝度によって定義される輝度範囲を示すことによって表現される第2のタイプである場合、
前記出力部は、前記第2のタイプによって最高輝度を示す前記最高輝度情報と前記復号映像情報とを出力する
請求項2に記載の再生装置。
The type indicated by the first attribute information includes a luminance range of the video stream, a maximum luminance of all the pictures of the video stream, and a group of one or more pictures included in the video stream. If it is the second type expressed by indicating the luminance range defined by the highest luminance ,
The playback device according to claim 2 , wherein the output unit outputs the highest luminance information indicating the highest luminance according to the second type and the decoded video information.
前記第1の属性情報によって示されるタイプが、基本ビデオストリームと、前記基本ビデオストリームの輝度を拡張するための拡張ビデオストリームとによって、輝度が表現されるタイプである場合、
前記復号部は、前記ビデオストリームを前記拡張ビデオストリームとして復号することによって前記復号映像情報を生成し、さらに、前記基本ビデオストリームを前記記録媒体から読み出して復号することによって基本映像情報を生成し、
前記出力部は、前記最高輝度情報と、前記基本映像情報を用いて画像処理された前記復号映像情報とを出力する
請求項2に記載の再生装置。
When the type indicated by the first attribute information is a type in which luminance is expressed by a basic video stream and an extended video stream for extending the luminance of the basic video stream,
The decoding unit generates the decoded video information by decoding the video stream as the extended video stream, and further generates basic video information by reading and decoding the basic video stream from the recording medium,
The playback apparatus according to claim 2, wherein the output unit outputs the highest luminance information and the decoded video information image-processed using the basic video information.
前記属性読み出し部は、さらに、
前記ビデオストリームの最高輝度を示す第2の属性情報を、前記管理情報ファイルから読み出し、
前記出力部は、さらに、前記第2の属性情報を含む前記最高輝度情報を出力する
請求項1〜の何れか1項に記載の再生装置。
The attribute readout unit further includes:
Second attribute information indicating the highest luminance of the video stream is read from the management information file,
The output unit further reproducing apparatus according to any one of claim 1 to 5 for outputting the highest luminance information including the second attribute information.
符号化された映像情報であるビデオストリームが記録された記録媒体から前記ビデオストリームを読み出して再生する再生方法であって、
前記ビデオストリームの輝度のダイナミックレンジが、第1のダイナミックレンジか、前記第1のダイナミックレンジよりも広い第2のダイナミックレンジかを示す第1の属性情報を、前記ビデオストリームに対応付けて前記記録媒体に記録されている管理情報ファイルから読み出し、
前記ビデオストリームを前記記録媒体から読み出して復号することにより復号映像情報を生成し、
読み出された前記第1の属性情報が第2のダイナミックレンジを示す場合、前記第2のダイナミックレンジに応じた前記ビデオストリームの最高輝度を示す最高輝度情報と前記復号映像情報を出力する
再生方法。
A reproduction method for reading and reproducing the video stream from a recording medium on which a video stream that is encoded video information is recorded ,
The attribute information indicating whether the dynamic range of luminance of the video stream is a first dynamic range or a second dynamic range wider than the first dynamic range is associated with the video stream and recorded. Read from the management information file recorded on the medium,
Decode video information is generated by reading and decoding the video stream from the recording medium,
If the read out first attribute information indicating a second dynamic range, and outputs the highest luminance information and prior Symbol decoding video information to indicate a maximum brightness of the video stream corresponding to the second dynamic range Playback method.
JP2015115045A 2014-08-07 2015-06-05 REPRODUCTION DEVICE, REPRODUCTION METHOD, AND RECORDING MEDIUM Active JP6466258B2 (en)

Priority Applications (13)

Application Number Priority Date Filing Date Title
EP21194019.2A EP3944241A3 (en) 2014-08-07 2015-07-14 Decoding system and decoding method
PCT/JP2015/003547 WO2016021120A1 (en) 2014-08-07 2015-07-14 Reproduction device, reproduction method, and recording medium
EP15829514.7A EP3107100B1 (en) 2014-08-07 2015-07-14 Reproduction device, reproduction method, and recording medium
CN201580001920.8A CN105580081B (en) 2014-08-07 2015-07-14 Reproducing apparatus, reproducing method, and recording medium
CN202010088066.6A CN111276170B (en) 2014-08-07 2015-07-14 Decoding system and decoding method
US15/278,582 US10255951B2 (en) 2014-08-07 2016-09-28 Playback device, playback method, and recording medium
US16/251,688 US10832737B2 (en) 2014-08-07 2019-01-18 Playback device, playback method, and recording medium
JP2020108647A JP6991279B2 (en) 2014-08-07 2020-06-24 Decoder system and decoding method
US17/038,753 US11335382B2 (en) 2014-08-07 2020-09-30 Playback device, playback method, and recording medium
US17/038,708 US11538502B2 (en) 2014-08-07 2020-09-30 Playback device, playback method, and recording medium
JP2021129190A JP7163461B2 (en) 2014-08-07 2021-08-05 Decoding method and decoder system
US17/556,241 US11908492B2 (en) 2014-08-07 2021-12-20 Playback device, playback method, and recording medium
US17/556,227 US11929102B2 (en) 2014-08-07 2021-12-20 Playback device, playback method, and recording medium

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201462034389P 2014-08-07 2014-08-07
US62/034,389 2014-08-07

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2019001572A Division JP6724176B2 (en) 2014-08-07 2019-01-09 Decoder system and decoding method

Publications (2)

Publication Number Publication Date
JP2016039627A JP2016039627A (en) 2016-03-22
JP6466258B2 true JP6466258B2 (en) 2019-02-06

Family

ID=55530347

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2015115045A Active JP6466258B2 (en) 2014-08-07 2015-06-05 REPRODUCTION DEVICE, REPRODUCTION METHOD, AND RECORDING MEDIUM
JP2019001572A Active JP6724176B2 (en) 2014-08-07 2019-01-09 Decoder system and decoding method

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2019001572A Active JP6724176B2 (en) 2014-08-07 2019-01-09 Decoder system and decoding method

Country Status (4)

Country Link
US (3) US10255951B2 (en)
EP (1) EP3107100B1 (en)
JP (2) JP6466258B2 (en)
CN (2) CN105580081B (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016062637A (en) 2014-09-12 2016-04-25 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America Recording medium, reproduction apparatus and reproducing method
CN109076256A (en) * 2016-04-12 2018-12-21 索尼公司 Sending device, sending method, receiving device and method of reseptance
WO2019017362A1 (en) * 2017-07-20 2019-01-24 ソニー株式会社 Transmission device, transmission method, receiving device and receiving method
CN114302215B (en) * 2021-12-29 2023-09-29 北京奕斯伟计算技术股份有限公司 Video data stream decoding system, method, electronic device and medium

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
MY119993A (en) * 1996-03-06 2005-08-30 Sony Corp Electronic still camera.
JPH09282848A (en) 1996-04-05 1997-10-31 Pioneer Electron Corp Information recording medium, and recording apparatus and reproducing apparatus therefor
CN100583955C (en) * 1998-07-17 2010-01-20 索尼公司 Imaging apparatus and image data processing method
US8300698B2 (en) * 2006-10-23 2012-10-30 Qualcomm Incorporated Signalling of maximum dynamic range of inverse discrete cosine transform
JP4877165B2 (en) * 2007-09-11 2012-02-15 ソニー株式会社 Monitoring system
US20090293082A1 (en) * 2008-05-20 2009-11-26 Broadcom Corporation Video processing system with key table and methods for use therewith
US8428145B2 (en) * 2008-12-31 2013-04-23 Entropic Communications, Inc. System and method for providing fast trick modes
PT2465265T (en) * 2009-08-12 2019-02-01 Interdigital Vc Holdings Inc Methods and apparatus for improved intra chroma encoding and decoding
PT2617195T (en) * 2010-09-16 2019-06-19 Koninklijke Philips Nv Apparatuses and methods for improved encoding of images
US9451274B2 (en) * 2011-04-28 2016-09-20 Koninklijke Philips N.V. Apparatuses and methods for HDR image encoding and decoding
WO2012153224A1 (en) * 2011-05-10 2012-11-15 Koninklijke Philips Electronics N.V. High dynamic range image signal generation and processing
CN103202021B (en) * 2011-09-13 2017-06-13 松下知识产权经营株式会社 Code device, decoding apparatus, transcriber, coding method and coding/decoding method
JP6407717B2 (en) * 2011-09-27 2018-10-17 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. Apparatus and method for dynamic range conversion of images
TWI586150B (en) 2012-06-29 2017-06-01 新力股份有限公司 Image processing device and non-transitory computer readable storage medium
WO2014107255A1 (en) * 2013-01-02 2014-07-10 Dolby Laboratories Licensing Corporation Backward-compatible coding for ultra high definition video signals with enhanced dynamic range
EP3926963A3 (en) 2013-04-30 2022-01-26 Saturn Licensing LLC Transmitting device, transmitting method, receiving device, and receiving method
CA2914978C (en) * 2013-06-20 2022-05-03 Sony Corporation Reproduction device, reproduction method, and recording medium
JP2015008360A (en) * 2013-06-24 2015-01-15 ソニー株式会社 Reproducing apparatuses, reproducing method and recording medium
JP2016541140A (en) * 2013-11-13 2016-12-28 エルジー エレクトロニクス インコーポレイティド Broadcast signal transmitting / receiving method and apparatus for providing HDR broadcasting service
MX358934B (en) * 2014-06-26 2018-09-10 Panasonic Ip Man Co Ltd Data output device, data output method, and data generation method.
JP6421504B2 (en) * 2014-07-28 2018-11-14 ソニー株式会社 Image processing apparatus and image processing method

Also Published As

Publication number Publication date
EP3107100B1 (en) 2021-10-20
EP3107100A4 (en) 2017-05-31
JP2019075819A (en) 2019-05-16
US10255951B2 (en) 2019-04-09
US10832737B2 (en) 2020-11-10
US11538502B2 (en) 2022-12-27
JP6724176B2 (en) 2020-07-15
CN105580081A (en) 2016-05-11
US20170018291A1 (en) 2017-01-19
US20190156864A1 (en) 2019-05-23
US20210012811A1 (en) 2021-01-14
CN105580081B (en) 2020-03-03
EP3107100A1 (en) 2016-12-21
CN111276170A (en) 2020-06-12
JP2016039627A (en) 2016-03-22
CN111276170B (en) 2021-09-07

Similar Documents

Publication Publication Date Title
JP6227828B2 (en) Playback apparatus and playback method
JP6487514B2 (en) Playback apparatus and playback method
JP6616540B2 (en) Reproduction method and reproduction apparatus
JP6724176B2 (en) Decoder system and decoding method
JP6272533B2 (en) Reproduction method and reproduction apparatus
JP7163461B2 (en) Decoding method and decoder system
WO2016038811A1 (en) Recording medium, playback device, and playback method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20171227

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20181002

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181122

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20181211

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190109

R150 Certificate of patent or registration of utility model

Ref document number: 6466258

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150