TWI826400B - 資訊處理裝置、資訊處理方法、記錄媒體、再生裝置、再生方法、及程式 - Google Patents

資訊處理裝置、資訊處理方法、記錄媒體、再生裝置、再生方法、及程式 Download PDF

Info

Publication number
TWI826400B
TWI826400B TW107139426A TW107139426A TWI826400B TW I826400 B TWI826400 B TW I826400B TW 107139426 A TW107139426 A TW 107139426A TW 107139426 A TW107139426 A TW 107139426A TW I826400 B TWI826400 B TW I826400B
Authority
TW
Taiwan
Prior art keywords
random access
image
reproduction
preamble
dynamic metadata
Prior art date
Application number
TW107139426A
Other languages
English (en)
Other versions
TW201929541A (zh
Inventor
內村幸一
Original Assignee
日商索尼股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日商索尼股份有限公司 filed Critical 日商索尼股份有限公司
Publication of TW201929541A publication Critical patent/TW201929541A/zh
Application granted granted Critical
Publication of TWI826400B publication Critical patent/TWI826400B/zh

Links

Classifications

    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614Multiplexing of additional data and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/12Formatting, e.g. arrangement of data block or words on the record carriers
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/30Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/30Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording
    • G11B27/309Table of contents
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/231Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2387Stream processing in response to a playback request from an end-user, e.g. for trick-play
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/426Internal components of the client ; Characteristics thereof
    • H04N21/42646Internal components of the client ; Characteristics thereof for reading from or writing on a non-volatile solid state storage medium, e.g. DVD, CD-ROM
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4318Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432Content retrieval operation from a local storage medium, e.g. hard-disk
    • H04N21/4325Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/658Transmission by the client directed to the server
    • H04N21/6587Control parameters, e.g. trick play commands, viewpoint selection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84Generation or processing of descriptive data, e.g. content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • H04N5/85Television signal recording using optical recording on discs or drums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8233Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being a character code signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Television Signal Processing For Recording (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本技術係有關於,可防止隨機存取時的不自然之亮度變化的資訊處理裝置、資訊處理方法、記錄媒體、再生裝置、再生方法、及程式。 本技術之一側面的資訊處理裝置,係生成含有圖像之亮度資訊的動態後設資料;以對會變成隨機存取點之圖像之每一者附加動態後設資料的方式,來進行HDR視訊之資料的編碼。例如,可對快轉再生/回捲再生、章節選擇再生時會變成隨機存取點的GOP之開頭的圖像,附加動態後設資料。本技術係可適用於Blu-ray(註冊商標)Disc播放器。

Description

資訊處理裝置、資訊處理方法、記錄媒體、再生裝置、再生方法、及程式
本技術係有關於資訊處理裝置、資訊處理方法、記錄媒體、再生裝置、再生方法、及程式,特別是有關於,可防止隨機存取時的不自然之亮度變化的資訊處理裝置、資訊處理方法、記錄媒體、再生裝置、再生方法、及程式。
Ultra HD Blu-ray(註冊商標) Disc(UHD BD),係為支援動態範圍擴充視訊也就是HDR(High Dynamic Range)視訊之收錄的BD規格。相對於SDR(Standard Dynamic Range)視訊的最高亮度是100nits(100cd/m2 ),HDR視訊的最高亮度係為超過其的例如10000nits。
作為HDR視訊串流的後設資料,含有圖像(畫格)單位之亮度資訊的後設資料也就是Dynamic metadata,係被規定在SMPTE ST 2094中。在附加有Dynamic metadata的HDR視訊串流之再生時,從播放器側往TV側,係將各圖像連同Dynamic metadata而一起被傳輸。
於TV側,係在顯示器的最高亮度是低於HDR視訊之亮度的情況下,則會基於從BD播放器所被傳輸過來的Dynamic metadata,進行用來壓縮HDR視訊之亮度所需之處理。 [先前技術文獻] [專利文獻]
[專利文獻1]日本特開2017-139052號公報
[發明所欲解決之課題]
HDR視訊之再生中有時候會發生隨機存取。隨機存取係為,以倍速進行快轉再生/回捲再生的特殊再生(trickplay),章節跳躍(章節選擇)等,跳躍區間而進行的再生。當這些特殊再生、章節跳躍被使用者所指示的情況下,就會發生隨機存取。
像是未被附加Dynamic metadata這類,隨著隨機存取所致之跳躍目的地之圖像之狀態,有時候亮度的變化會變得不自然。
本技術係有鑑於此種狀況而研發,可防止隨機存取時的不自然之亮度變化。 [用以解決課題之手段]
本技術之第1側面的資訊處理裝置,係具備:生成部,係生成含有圖像之亮度資訊的動態後設資料;和編碼部,係以對會變成隨機存取點之圖像之每一者附加前記動態後設資料的方式,來進行HDR視訊之資料的編碼。
本技術之第2側面的再生裝置,係具備:再生部,係進行已被附加含有圖像之亮度資訊的動態後設資料的視訊串流的隨機存取再生;和輸出控制部,係在令表示隨機存取再生會被進行的所定之資訊重疊於前記圖像而顯示的情況下,對隨機存取點的前記圖像,附加隨機存取再生時的亮度調整中所使用的隨機存取再生時用之後設資料,將已附加前記隨機存取再生時用之後設資料的前記圖像,輸出至顯示裝置。
在本技術的第1側面中,含有圖像之亮度資訊的動態後設資料會被生成,HDR視訊之資料的編碼,是以對會變成隨機存取點之圖像之每一者附加前記動態後設資料的方式,而被進行。
在本技術的第2側面中,已被附加含有圖像之亮度資訊的動態後設資料的視訊串流的隨機存取再生會被進行,在令表示隨機存取再生會被進行的所定之資訊重疊於前記圖像而顯示的情況下,對隨機存取點的前記圖像,隨機存取再生時的亮度調整中所使用的隨機存取再生時用之後設資料會被附加,已被附加有前記隨機存取再生時用之後設資料的前記圖像,會被輸出至顯示裝置。 [發明效果]
若依據本技術,則可防止隨機存取時的不自然之亮度變化。
此外,並非一定限定於這裡所記載的效果,亦可為本揭露中所記載之任一效果。
以下,說明用以實施本技術的形態。說明是按照以下順序進行。 1.HDR視訊用的後設資料 2.隨機存取再生時的亮度 3.第1實施形態(編碼之限制的例子) 4.第2實施形態(使用預設後設資料的例子) 5.再生系統之構成例 6.其他例
≪HDR視訊用的後設資料≫ 圖1係HDR內容的再生系統之構成例的圖示。
圖1的再生系統,係由再生裝置1與TV(電視受像機)2,以HDMI(註冊商標)(High-Definition Multimedia Interface) 2.0a、HDMI 2.1等所定規格之纜線做連接而被構成。再生裝置1與TV2,亦可透過無線的介面而被連接。
再生裝置1,係為UHD BD播放器等,支援HDR內容之再生的裝置。再生裝置1的驅動機中係被裝著有,記錄了HDR內容的BD。再生裝置1所再生的內容中,除了HDR視訊之資料以外,還包含有音訊資料。
TV2,係除了具有將以播送波或網路為傳輸路而被傳輸過來的節目予以接收並顯示的機能以外,還具有將從外部所被輸入之視訊加以顯示的機能。TV2所具有的顯示裝置,係為支援亮度超過100nits的HDR視訊之顯示的顯示器。
在HDR視訊之傳輸開始以前,再生裝置1與TV2,係會收送有關各自性能的資訊等,以進行HDMI的傳輸設定(configuration)。例如,從再生裝置1對TV2,係會通知要進行HDR視訊之傳輸。又,從TV2對再生裝置1,係會通知TV2之顯示器的最高亮度。
在傳輸設定之後,再生裝置1,係將從BD讀出的HDR視訊串流予以解碼,將HDR視訊之各圖像,輸出至TV2。TV2,係將從再生裝置1所被傳輸過來的各圖像予以接收,並顯示之。
此時,於TV2中,會隨著顯示器的性能,適宜地進行將從再生裝置1所被傳輸過來的HDR視訊之亮度予以調整(壓縮)的處理。亮度壓縮,係在再生裝置1所輸出的HDR視訊之亮度,高於TV2之顯示器的最高亮度時,會被進行。
在圖1的例子中,假設再生裝置1所輸出的HDR視訊之亮度係為1000nits,TV2之顯示器的最高亮度係為500nits。
圖2係HDR視訊之亮度壓縮時所被使用之色調曲線之例子的圖示。
圖2的橫軸係表示輸入訊號之亮度,縱軸係表示輸出(顯示)之亮度。例如,使用SMPTE ST 2084中所被規定之PQ(Perceptual Quantization)曲線的EOTF(Electro-Optical Transfer Function)處理係在TV2側被進行,HDR視訊之亮度會被壓縮成,不超過顯示器的最高亮度也就是500nits之範圍內。
此外,於圖2中箭頭的尖端所表示的,明暗之表現為非線性的點,係被稱為knee point。
如此,於圖1的再生系統中,相對於再生裝置1所輸出的HDR視訊之亮度,TV2之顯示器不具有足夠亮度的情況下,在TV2側會進行亮度壓縮。
從再生裝置1對TV2,係作為亮度壓縮所需之輔助資訊,會傳輸含有內容之亮度資訊的後設資料。例如,Dynamic metadata會從再生裝置1對TV2而被傳輸。
Dynamic metadata,係將內容之亮度資訊以圖像單位而做動態表現的後設資料,是已被標準化成為SMPTE ST 2094。
圖3係SMPTE ST 2094-40中所被規定之Dynamic metadata的圖示。
如圖3的第1行所示,在Dynamic metadata中係描述有,畫格中所被設定之Window之資訊。Window,係為畫格內所被設定之矩形領域。在1畫格內最多可以設定3個Window。
第2~14行中所示的各參數,是按照畫格中所被設定之每一Window,而被描述。
Window size、Window location,係表示Window的大小與位置。
Internal Ellipse size、Internal Ellipse location,係表示Window內所被設定之2個橢圓之中的內側之橢圓的大小與位置。在Window內設定橢圓,而可指定橢圓內的亮度。
External Ellipse size、External Ellipse location,係表示Window內所被設定之2個橢圓之中的外側之橢圓的大小與位置。
Rotation angle,係表示Window內所被設定之2個橢圓之傾斜。
Overlap process option,係表示橢圓內的像素之處理方法。
maxscl,係表示Window之中最亮之像素的RGB值。
average max rgb,係表示Window之中的各像素之R、G、B之中最大之值的平均。
Distribution max rgb percentages,係將Window之中的較亮之亮度的排名,以百分比來表示。
Distribution max rgb percentiles,係將Window之中的較亮之亮度的排名,以順位(百分位數)來表示。
Fraction bright pixels,係表示場景內的最大之亮度值所出現之程度。
Knee point,係表示上述的knee point之亮度值。
Bezier curve anchors,係表示超過knee point的明亮度之樣本x,y。
Color saturation weight,係表示於所想定的顯示器(Target display)中進行亮度壓縮之際發生了變化之RGB值的補正時所使用的值。
Target System display max luminance,係表示所想定之顯示器的亮度。藉由Target System display max luminance,就可指定是想定要在這種顯示器上被顯示而製作內容。
Local display luminance,係將顯示器分割成縱橫2×2至25×25之區域時,表示各個區域的最大之亮度值。
Local mastering display luminance,係將mastering display分割成縱橫2×2至25×25之區域時,表示各個區域的最大之亮度值。
如此,在Dynamic metadata中,係藉由第1~15行之參數來表示畫格(畫格內之Window)之屬性。又,藉由第16行與第17行之參數,來表示所想定之顯示器之屬性,藉由第18行之參數,來表示內容之作成時所被使用的顯示器之屬性。
圖4係BD之檔案結構的圖示。
圖4的光碟11,係將HDR視訊之內容以BD格式加以記錄的記錄媒體。
細節將於後述,但在BDMV目錄之下所被設定的STREAM目錄中,係儲存有被設定了m2ts之副檔名的AV串流檔案。
AV串流檔案,係將HDR視訊串流、音訊串流、字幕串流等以MPEG-2進行多工化所得的MPEG-2 TS之檔案。在圖4的例子中,係有「01000.m2ts」、「02000.m2ts」、「03000.m2ts」之AV串流檔案,被儲存在STREAM目錄下。
HDR視訊串流,係為例如HEVC(High Efficiency Video Coding)之編碼串流。Dynamic metadata,係作為HEVC的SEI(Supplemental Enhancement Information)訊息而被包含在HDR視訊串流中。
圖5係為圖4中以框F1所圍繞表示的「03000.m2ts」之AV串流之結構之例子的圖示。
如圖5的最上段所示,「03000.m2ts」之AV串流,係由儲存視訊、音訊、字幕等之各個資料的TS packet所構成。將視訊的TS packet予以集結而構成了Video Elementary stream。
Video Elementary stream係由Access Unit之排列所構成,1個Access Unit,係為HDR視訊的1圖像之資料。各個Access Unit中,係在AU delimiter之後,含有SPS、PPS等之參數,同時,如框F11所圍繞表示,含有SEI訊息。
在SEI訊息中,含有上述的Dynamic metadata。此外,SEI訊息的後面,係含有HDR視訊之資料,來作為Picture data。
如此,在BD中,Dynamic metadata,係以對各圖像做附加的形式,而被包含在HDR視訊串流中,連同音訊串流等一起被多工化。
此外,在構成HDR視訊串流的圖像之中,有時候也會包含有未被附加Dynamic metadata的圖像。
圖6係為Dynamic metadata之傳輸例的圖示。
如圖6所示,Dynamic metadata,係與HDR視訊串流進行解碼所得的各圖像建立關連,從再生裝置1被傳輸至TV2。於TV2中,各圖像的亮度壓縮,是基於連同各圖像一起被傳輸過來的Dynamic metadata,而被進行。
≪隨機存取再生時的亮度變化≫ 再生裝置1係具有,進行伴隨隨機存取的再生方式也就是隨機存取再生的機能。
隨機存取,係於構成HDR視訊串流的圖像之排列中,將再生對象的圖像,從某個圖像,跳躍至相鄰圖像以外之其他圖像的意思。
隨機存取再生中係包含有特殊再生與章節選擇再生。特殊再生係意味著5倍速、8倍速等之所定倍速下的快轉再生/回捲再生。又,章節選擇再生,係意味著跳躍到章節所被設定之圖像或所定時間後之圖像,從跳躍目的地之圖像起進行再生的再生方式。
圖7係為隨機存取再生之例子的圖示。
例如,再生對象之圖像變成圖像P1的時序上被指示了章節選擇再生,如圖7的箭頭A1所示,針對從圖像P1跳躍至圖像P2的情況,加以說明。
章節選擇再生被指示前,比圖像P1還前(左側)之各圖像,係連同各自所被附加之Dynamic metadata而一起被輸出至TV2。又,圖像P1,係連同被附加至圖像P1的Dynamic metadata一起被輸出至TV2。
又,在章節選擇再生被指示的情況下,圖像P2,係連同在TV2側進行圖像P2之亮度壓縮時所需使用的後設資料一起被輸出。此處,如雙向箭頭所示,若圖像P2是未被附加Dynamic metadata之區間內的圖像,則作為連同圖像P2一起輸出的後設資料,考慮會有各種的後設資料。
例如,考慮連同圖像P2,跳躍來源之圖像亦即圖像P1的Dynamic metadata會一起從再生裝置1被輸出至TV2。此情況下,於TV2中,圖像P2的亮度壓縮,會基於圖像P1的Dynamic metadata而被進行。
又,考慮連同圖像P2,被附加有Dynamic metadata的,圖像P2的前一圖像亦即圖像P3的Dynamic metadata,會一起從再生裝置1被輸出至TV2。此情況下,於TV2中,圖像P2的亮度壓縮,會基於圖像P3的Dynamic metadata而被進行。
無論哪種情況,都有可能發生非HDR內容製作者之意圖的亮度壓縮,對跳躍目的地之圖像P2做實施。因此,圖像P2的外觀,就會變成與HDR內容之製作者所想定之外觀不同的外觀。
圖8係為隨機存取再生時之顯示例的圖示。
圖8的橫軸係表示時刻。按照圖像P11、P12、P13之順序從再生裝置1被傳輸至TV2,於TV2中進行亮度壓縮。
圖像P11、P12、P13之每一者係例如,隨應於被使用者指示了8倍速的快轉再生,OSD影像p11、p12、p13會在再生裝置1中被合成。於圖8的例子中,表示快轉再生的2個三角形之影像,與含有8倍速之文字的橫長帶狀之影像所組合而成的影像,會作為OSD影像而被顯示。
回捲再生被指示時也會顯示出同樣的OSD影像。又,章節選擇再生被指示時也是,會顯示出含有跳躍目的地之章節號碼的OSD影像等。
例如,假設圖像P12係為,構成比圖像P11、P13還高亮度之場景的圖像。
OSD影像p11所被合成的圖像P11的亮度壓縮,係基於連同圖像P11一起被傳輸的Dynamic metadata所表示的色調曲線C1,而被進行。OSD影像p12所被合成的圖像P12的亮度壓縮,係基於連同圖像P12一起被傳輸的Dynamic metadata所表示的色調曲線C2,而被進行。OSD影像p13所被合成的圖像P13的亮度壓縮,係基於連同圖像P13一起被傳輸的Dynamic metadata所表示的色調曲線C3,而被進行。
構成高亮度之場景的圖像P12之亮度壓縮時所被使用之色調曲線C2,係相較於圖像P11之亮度壓縮時所被使用之色調曲線C1、圖像P13之亮度壓縮時所被使用之色調曲線C3,會將亮度予以較強地壓縮。OSD影像p12的亮度也是,比起圖像P11、P13上的OSD影像之亮度,會被較強地壓縮。
因此,若比較亮度壓縮後的各圖像之OSD影像的外觀,則如圖8所示,圖像P12上的OSD影像p12,係以亮度低於圖像P11、P13上的OSD影像的狀態,而被顯示。於圖8中,將OSD影像p12塗成較淡顏色來表示這件事情,係代表著其亮度低於圖像P11、P13上的OSD影像。
圖像P11乃至P13被依序顯示的情況下,在圖像P12的顯示時序上OSD影像之亮度會降低一階段,隨著亮度的壓縮程度,而會變成不自然的外觀。例如,亮度變化較大的場景若是連續出現的情況下,則OSD影像看起來就會發生閃爍。
如此,含有Dynamic metadata的HDR視訊串流進行隨機存取再生的情況下,跳躍目的地之圖像未被附加有Dynamic metadata時的HDR視訊之外觀,有時候會變得不自然。又,被重疊於HDR視訊而顯示的OSD影像之外觀有時候會變得不自然。
≪第1實施形態(編碼之限制的例子)≫ <在GOP之開頭的圖像必定附加Dynamic metadata的例子> 圖9係為構成HDR視訊串流的GOP之例子的圖示。
光碟11中所被記錄之HDR視訊串流,係為例如HEVC(High Efficiency Video Coding)之編碼串流,是由GOP單位之圖像所構成。在圖9的例子中,係圖示了GOP1與GOP2。
在構成HDR視訊串流的圖像之中,至少,對身為GOP1之開頭圖像的圖像P1與身為GOP2之開頭圖像的圖像P2,係被附加有Dynamic metadata。顯示順序上身為GOP之開頭圖像的圖像P1與圖像P2,係為會變成隨機存取點之圖像。
亦即,光碟11中所被記錄之HDR視訊串流係為遵循著,對隨機存取點之圖像必定會附加Dynamic metadata的此一限制,而被生成的串流。
快轉再生與回捲再生係例如,只將各個GOP之開頭的圖像予以依序再生,而被進行。再生裝置1,係將會變成隨機存取點的各個GOP之開頭的圖像,連同對各個GOP之開頭的圖像所被附加之Dynamic metadata,一起輸出至TV2。
又,章節選擇再生,係從所定之GOP之開頭的圖像起進行再生,而被進行。再生裝置1,係將會變成隨機存取點的所定之GOP之開頭的圖像,連同對該圖像所被附加之Dynamic metadata,一起輸出至TV2。
於TV2中,會變成隨機存取點的GOP之開頭的圖像的亮度壓縮,係基於連同GOP之開頭的圖像一起被傳輸過來的Dynamic metadata,而被進行。藉由亮度壓縮後的圖像被顯示,就可實現快轉再生/回捲再生、或章節選擇再生。
如此,對隨機存取點之圖像必定會被附加有Dynamic metadata,藉此可以防止跳躍目的地之圖像的亮度壓縮,會以非HDR內容製作者之意圖的形式,而被進行。
此外,雖然假設光碟11中所被記錄之HDR視訊串流是HEVC之編碼串流,但亦可為AVC(H.264/MPEG-4 AVC(Advanced Video Coding))等,以其他方式而被編碼所生成的串流。
AVC之視訊串流,係有CVS(Coded Video Sequence)等,構成編碼單位的單元。AVC之視訊串流,係遵循著,對會變成隨機存取點的CVS之開頭的圖像必定附加Dynamic metadata的此一限制,進行編碼而被生成。
又,遵循對隨機存取點之圖像必定附加Dynamic metadata的此一限制而被生成的HDR視訊串流,亦可不是被記錄至光碟11,而是透過網際網路等之網路而被配訊。進行遵循如此限制而被生成的HDR視訊串流之配訊的系統之構成,將於後述。
<BD格式> 此處,說明BD-ROM格式。
・資料的管理結構 圖10係BD-ROM格式中的AV串流的管理結構之例子的圖示。
AV串流之管理,係使用PlayList和Clip這2個層來進行之。AV串流,係不只在光碟11中,還可被記錄在再生裝置1的本機儲存體中。
1個AV串流,和其所附隨之資訊亦即Clip Information的配對,係被視為1個物件而管理。AV串流與Clip Information之配對,稱作Clip。
AV串流係被展開在時間軸上,各Clip的存取點,係主要是用時間戳記而在PlayList中被指定。Clip Information,係用來找出AV串流中的應開始解碼之位址等,而被使用。
PlayList,係為AV串流的再生區間之集合。AV串流中的1個再生區間係稱作PlayItem。PlayItem,係以時間軸上的再生區間之IN點和OUT點之配對來表示。如圖10所示,PlayList係由1或複數個PlayItem所構成。
從圖10的左起第1個PlayList係由2個PlayItem所構成,藉由該2個PlayItem,左側的Clip中所含之AV串流的前半部分與後半部分係分別被參照。
左起第2個PlayList係由1個PlayItem所構成,藉由其,右側的Clip中所含之AV串流的全體被參照。
左起第3個PlayList係由2個PlayItem所構成,藉由該2個PlayItem,左側的Clip中所含之AV串流的某個部分、和右側的Clip中所含之AV串流的某各部分,係分別被參照。
例如,左起第1個PlayList中所含之左側PlayItem是被當成再生對象而被碟片導航程式所指定的時候,該PlayItem所參照的左側之Clip中所含之AV串流的前半部分的再生,會被進行。
在PlayList之中,將由1個以上的PlayItem之排列所作成的再生路徑,稱作主路徑(Main Path)。又,在PlayList之中,平行於Main Path,將由1個以上的SubPlayItem之排列所作成的再生路徑,稱作子路徑(Sub Path)。
圖11係Main Path與Sub Path之結構的圖示。
PlayList,係具有1個Main Path和1個以上之Sub Path。圖11的PlayList,係具有3個PlayItem之排列所做成的1個Main Path和3個Sub Path。
構成Main Path的PlayItem中,係從開頭起依序分別被設定有ID。在Sub Path中也是,從開頭起依序被設定有Subpath_id=0、Subpath_id=1、及Subpath_id=2之ID。
於圖11的例子中,Subpath_id=0之Sub Path中係含有1個SubPlayItem,Subpath_id=1之Sub Path中係含有2個SubPlayItem。又,Subpath_id=2之Sub Path中係含有1個SubPlayItem。
1個PlayItem所參照之AV串流中,係至少含有視訊串流。在AV串流中,和AV串流中所含之視訊串流在相同時序上(同步)而被再生的音訊串流,係可被含有1個以上,也可不含。
在AV串流中,和AV串流中所含之視訊串流同步被再生的點陣圖之字幕(PG(Presentation Graphic))之串流,係可被含有1個以上,也可不含。
在AV串流中,和AV串流檔案中所含之視訊串流同步被再生的IG(Interactive Graphic)之串流,係可被含有1個以上,也可不含。IG之串流係被使用在,令可被使用者操作之按鈕等之圖形被顯示。
在1個PlayItem所參照的AV串流中,係有視訊串流、和與其同步而被再生的音訊串流、PG串流、及IG串流,被多工化。
又,1個SubPlayItem,係參照與PlayItem所參照之AV串流不同串流的視訊串流、音訊串流、PG串流等。
如此,AV串流之再生係使用PlayList與Clip Information而被進行。為了管理AV串流之再生而所被使用的再生控制資訊也就是Index table、PlayList、Clip Information,適宜簡稱為Data Base資訊。
・目錄結構 圖12係光碟11中所被記錄之檔案的管理結構之例子的圖示。
光碟11中所被記錄之各檔案,係藉由目錄結構而被階層式管理。光碟11上係被作成有1個root目錄。
root目錄之下係放置BDMV目錄。
BDMV目錄之下係儲存有,被設定「Index.bdmv」之名稱的檔案亦即Index table檔案、和被設定「MovieObject.bdmv」之名稱的檔案亦即MovieObject檔案。Index table檔案中係被描述有Index table。
在BDMV目錄之下,係設有PLAYLIST目錄、CLIPINF目錄、STREAM目錄等。
PLAYLIST目錄中係被儲存有,描述了PlayList的PlayList檔案。對各PlayList檔案係設定有,5位數的數字和副檔名「.mpls」所組合而成的名稱。對圖12所示的3個PlayList檔案,係設定了「00000.mpls」、「00001.mpls」、「00002.mpls」之檔名。
CLIPINF目錄中係儲存有Clip Information檔案。對各Clip Information檔案係設定有,5位數的數字和副檔名「.clpi」所組合而成的名稱。對圖12的3個Clip Information檔案,係分別被設定了「01000.clpi」、「02000.clpi」、「03000.clpi」之檔名。
STREAM目錄中係被儲存有,描述了上述之AV串流的檔案。對各AV串流檔案係設定有,5位數的數字和副檔名「.m2ts」所組合而成的名稱。對圖12的3個AV串流檔案,係分別被設定了「01000.m2ts」、「02000.m2ts」、「03000.m2ts」之檔名。
相同之5位數之數字被設定在檔名的Clip Information檔案與AV串流檔案,係為構成1個Clip的檔案。「01000.m2ts」的AV串流檔案的再生時係會使用「01000.clpi」的Clip Information檔案,「02000.m2ts」的AV串流檔案的再生時係會使用「02000.clpi」的Clip Information檔案。
<各裝置的構成> ・記錄裝置的構成 圖13係為記錄裝置3的構成例的區塊圖。
如上述的BD也就是光碟11,係於圖13的記錄裝置3中被作成。記錄裝置3,係為HDR內容之製作時所被使用之裝置。
記錄裝置3係由:控制器21、編碼處理部22、及碟片驅動機23所構成。身為母片的視訊係被輸入至編碼處理部22。
控制器21係由:CPU(Central Processing Unit)、ROM(Read Only Memory)、RAM(Random Access Memory)等所構成。控制器21係執行所定之程式,控制記錄裝置3全體的動作。
編碼處理部22,係進行母片之視訊的編碼,生成HDR視訊串流。HDR視訊串流之生成時被附加至各圖像,作為SEI訊息而被編碼的Dynamic metadata,係從控制器21被供給。
編碼處理部22所致之編碼,遵循對隨機存取點之圖像必定附加Dynamic metadata的此一限制而被進行。
又,編碼處理部22係適宜地進行選單影像之編碼而生成IG串流,進行字幕資料之編碼而生成PG串流。對編碼處理部22,還會輸入選單之影像或字幕資料等之資訊。
編碼處理部22,係將藉由進行編碼所得之HDR視訊串流、IG串流、PG串流,連同音訊串流等一起進行多工化,以生成構成Clip的AV串流。編碼處理部22,係將已生成之AV串流,輸出至碟片驅動機23。
碟片驅動機23,係將從控制器21所被供給的Data Base資訊之各檔案、與從編碼處理部22所被供給的AV串流之檔案,依照圖12的目錄結構而記錄至光碟11。
圖14係為控制器21的機能構成例的區塊圖。
於控制器21中,Dynamic metadata生成部31、編碼控制部32、Data Base資訊生成部33、及記錄控制部34係被實現。圖14所示之機能部的其中至少一部分,係藉由控制器21的CPU執行所定程式,而被實現。
Dynamic metadata生成部31,係依照內容之製作者所致之輸入而設定各參數之值,生成Dynamic metadata。Dynamic metadata生成部31,係將已生成之Dynamic metadata,輸出至編碼控制部32。
編碼控制部32,係將已被Dynamic metadata生成部31所生成之Dynamic metadata輸出至編碼處理部22,令其進行HDR視訊的各圖像之編碼。又,編碼控制部32,係令編碼處理部22進行選單資料、字幕資料之編碼。
Data Base資訊生成部33,係依照內容之製作者所致之輸入,而生成Index table、PlayList、Clip Information等之Data Base資訊。Data Base資訊生成部33,係將已生成之Data Base資訊之檔案,輸出至記錄控制部34。已被Data Base資訊生成部33所生成之Data Base資訊,係適宜地被供給至編碼控制部32,在控制編碼時會被使用。
記錄控制部34,係將已被Data Base資訊生成部33所生成之Data Base資訊之檔案輸出至碟片驅動機23,令其記錄至光碟11。
如此,記錄裝置3係作為,生成Dynamic metadata,同時,遵循對隨機存取點之圖像必定附加Dynamic metadata的此一限制而進行編碼以生成HDR視訊串流的資訊處理裝置而發揮機能。
・再生裝置的構成 圖15係為再生裝置1的構成例的區塊圖。
再生裝置1,係由:控制器51、碟片驅動機52、記憶體53、本機儲存體54、通訊部55、解碼處理部56、操作輸入部57、及外部輸出部58所構成。
控制器51,係由CPU、ROM、RAM等所構成。控制器51係執行所定之程式,控制再生裝置1全體的動作。
碟片驅動機52,係將光碟11中所被記錄之資料予以讀出,並輸出至控制器51、記憶體53、或解碼處理部56。例如,碟片驅動機52,係將從光碟11所讀出之Data Base資訊,輸出至控制器51,將AV串流,輸出至解碼處理部56。
記憶體53,係將控制器51所執行的程式等,控制器51在執行各種處理上所必須之資料,加以記憶。
本機儲存體54,係由HDD(Hard Disk Drive)、SSD(Solid State Drive)等之記錄媒體所構成。本機儲存體54中係被記錄有,從伺服器所下載來的串流等。
通訊部55,係為無線LAN、有線LAN等之介面。例如,通訊部55,係透過網際網路等之網路而與伺服器進行通訊,將從伺服器下載的資料,供給至本機儲存體54。
解碼處理部56,係將從碟片驅動機52所被供給之AV串流中所被多工化的HDR視訊串流予以解碼,將解碼所得之HDR視訊之資料,輸出至外部輸出部58。
又,解碼處理部56,係將AV串流中所被多工化的音訊串流予以解碼,將解碼所得之音訊資料,輸出至外部輸出部58。雖然是針對視訊的再生為主來做說明,但像這樣,再生裝置1所再生的HDR內容中係也會含有音訊資料。
操作輸入部57,係由:按鈕、觸控面板等之輸入裝置、或將從遙控器所發送之紅外線等之訊號予以接收的收訊部所構成。操作輸入部57,係偵測出使用者操作,將表示所偵測出之操作內容的訊號,供給至控制器51。
外部輸出部58,係為HDMI等之外部輸出之介面。外部輸出部58,係透過HDMI纜線而與TV2進行通訊,取得TV2所擁有的顯示器之性能的相關之資訊並輸出至控制器51。又,外部輸出部58,係將從解碼處理部56所被供給的HDR視訊之資料予以接收,並輸出至TV2。
・TV的構成 圖16係TV2的構成例的區塊圖。
TV2,係由:控制器71、外部輸入部72、訊號處理部73、顯示器74、播送收訊部75、解碼處理部76、及通訊部77所構成。
控制器71,係由CPU、ROM、RAM等所構成。控制器71係執行所定之程式,控制TV2全體的動作。
例如,控制器71,係將表示顯示器74之性能的資訊,加以管理。控制器71,係在HDMI之傳輸設定時,將表示顯示器74之性能的資訊,輸出至外部輸入部72,發送至再生裝置1。
又,控制器71,係控制訊號處理部73所致之HDR視訊之處理。例如,控制器71,係在HDR內容之再生時基於從再生裝置1所被傳輸過來的Dynamic metadata,令訊號處理部73進行HDR視訊的亮度壓縮。
外部輸入部72,係為HDMI等之外部輸入之介面。外部輸入部72,係透過HDMI纜線而與再生裝置1進行通訊,將從再生裝置1所被傳輸過來的HDR視訊之各圖像之資料予以接收並輸出至訊號處理部73。又,外部輸入部72,係將連同HDR視訊之各圖像而一起被傳輸過來的Dynamic metadata予以接收,輸出至控制器71。
訊號處理部73,係進行從外部輸入部72所被供給之HDR視訊之處理,令顯示器74顯示映像。訊號處理部73,係依照控制器71所致之控制,適宜地進行HDR視訊的亮度壓縮,以使其不會超出顯示器74所能顯示的範圍。
訊號處理部73係還會進行,基於從解碼處理部76所被供給之資料,而令顯示器74顯示將節目之映像的處理等。
顯示器74,係為有機EL(Electroluminescence)顯示器或LCD(Liquid Crystal Display)等之顯示裝置。顯示器74,係基於從訊號處理部73所被供給之視訊訊號,而顯示HDR內容之映像或節目之映像。
播送收訊部75,係從天線所被供給之訊號,抽出所定之頻道的播送訊號,輸出至解碼處理部76。播送收訊部75所致之播送訊號之抽出,係依照控制器71所致之控制而進行。
解碼處理部76,係對從播送收訊部75所被供給之播送訊號實施解碼等之處理,將節目的視訊資料輸出至訊號處理部73。
通訊部77,係為無線LAN、有線LAN等之介面。通訊部77,係透過網際網路而與伺服器進行通訊。
<各裝置的動作> ・記錄裝置的動作 參照圖17的流程圖,說明記錄裝置3的記錄處理。
圖17的處理,係例如,當身為母片的視訊資料被輸入時,就被開始。
於步驟S1中,控制器21的Dynamic metadata生成部31,係依照內容之製作者所致之輸入而設定各參數之值,生成Dynamic metadata。
於步驟S2中,Data Base資訊生成部33,係生成PlayList等之Data Base資訊。
於步驟S3中,編碼處理部22,係依照編碼控制部32所致之控制,在對會變成隨機存取點的GOP之開頭的圖像必定會附加Dynamic metadata的此一限制之下,進行母片之視訊的編碼,生成HDR視訊串流。
又,編碼處理部22,係進行選單之影像或字幕資料的編碼,生成IG串流和PG串流。編碼處理部22,係將已生成之串流進行多工化,以生成AV串流。
於步驟S4中,碟片驅動機23,係將從控制器21所被供給之Data Base資訊之檔案,和從編碼處理部22所被供給之AV串流之檔案予以記錄,以生成光碟11。其後,處理就結束。
藉由以上的處理,記錄裝置3,係生成對會變成隨機存取點的GOP之開頭的圖像會被附加有Dynamic metadata的HDR視訊串流,可提供含有此種HDR視訊串流的HDR內容。
・再生裝置的動作 接著,參照圖18的流程圖,說明將HDR內容予以再生的再生裝置1之處理。
圖18的處理,係例如當再生裝置1的碟片驅動機52中被裝著光碟11,被指示HDR內容之再生時,就被開始。
於步驟S11中,碟片驅動機52,係將包含有PlayList檔案的Data Base資訊之檔案,從光碟11中讀出。
於步驟S12中,控制器51,係將PlayList檔案加以解析,進行再生對象之AV串流的特定等。
於步驟S13中,碟片驅動機52,係將含有再生對象之HDR視訊串流的AV串流之檔案,從光碟11中讀出。
於步驟S14中,解碼處理部56,係將從碟片驅動機52所被供給之AV串流中所含之HDR視訊串流予以解碼,將各圖像之資料輸出至外部輸出部58。各圖像中所被附加的Dynamic metadata係從解碼處理部56被供給至控制器51。
於步驟S15中,外部輸出部58,係對從解碼處理部56所被供給之HDR視訊之各圖像,附加從控制器51所被供給之Dynamic metadata,然後輸出至TV2。於TV2中,各圖像的亮度壓縮係基於Dynamic metadata而被進行,亮度壓縮後的圖像係被顯示。
於步驟S16中,控制器51係判定是否進行隨機存取再生。若於步驟S16中判定為不進行隨機存取再生,則回到步驟S15,繼續將各圖像予以依序再生的通常再生。
另一方面,於步驟S16中,若判定為要進行隨機存取再生,則處理係前進至步驟S17。例如,快轉再生/回捲再生被使用者所指示的情況下,或者,章節選擇再生被使用者所指示的情況下,則於步驟S16中判定為要進行隨機存取再生。
於步驟S17中,解碼處理部56係將身為隨機存取點的跳躍目的地之圖像,予以解碼。此處所被解碼的圖像,係為GOP之開頭的圖像,係被附加有Dynamic metadata。已被解碼之圖像之SEI中所含之Dynamic metadata,係被供給至控制器51。
於步驟S18中,外部輸出部58,係對隨機存取點之圖像,附加從控制器51所被供給之Dynamic metadata然後輸出至TV2。
其後,回到步驟S16,重複以上的處理。例如,已被使用者所指示的隨機存取再生是快轉再生/回捲再生的情況下,各個GOP之開頭的圖像會被依序再生,連同Dynamic metadata一起被輸出。例如當HDR內容之再生結束時,圖18的處理係結束。
如以上,由於對隨機存取點之圖像必定會附加有Dynamic metadata,因此即使在進行隨機存取再生的情況下,仍可防止跳躍目的地之圖像的亮度壓縮,會以非HDR內容製作者之意圖的形式而被進行。
<對被EP_map所指定的圖像必定附加Dynamic metadata的例子> 在屬於Data Base資訊的Clip Information中係會含有一種稱為EP_map的,用來指定隨機存取點的資訊。
亦可使得對被EP_map所指定的隨機存取點之圖像,必定會附加有Dynamic metadata的方式,來進行HDR視訊之資料的編碼。
圖19係為作為隨機存取點是含有已被EP_map所指定之圖像的HDR視訊串流之例子的圖示。
在圖19的上方所示的EP_map中係描述有,身為進入點(隨機存取點)的EP entry1與EP entry2之資訊。EP entry1與EP entry2係為表示,進入點的PTS(Presentation Time Stamp)、與藉由SPN(Source Packet Number)而被表示的,在HDR視訊串流上之位置的資訊。
於圖19的例子中,係藉由EP entry1而指定了圖像P21,藉由EP entry2而指定了圖像P22。在構成HDR視訊串流的圖像之中,至少對被EP entry1所指定的圖像P21與被EP entry2所指定的圖像P22,係會附加Dynamic metadata。
例如,從所定之進入點開始的章節選擇再生係被指示的情況下,再生裝置1,係將被EP entry所指定的圖像,連同被附加至該圖像的Dynamic metadata,一起輸出至TV2。
於TV2中,被EP entry所指定的圖像的亮度壓縮,是基於連同該圖像而一起所被傳輸過來的Dynamic metadata,而被進行。藉由亮度壓縮後的圖像被顯示,而實現了章節選擇再生。
如此,亦可對有別於HDR視訊串流的另一檔案之資訊也就是Clip Information中所含之EP_map所指定的圖像,使其必定會被附加Dynamic metadata。藉此,可以防止跳躍目的地之圖像的亮度壓縮,會以非HDR內容製作者之意圖的形式而被進行。
此外,亦可為,藉由MP4而被多工化的HDR內容,是於再生裝置1中被再生。
藉由MP4而被多工化的HDR內容中係含有:將HDR視訊之資料以AVC或HEVC等之所定之編碼方式進行編碼所得的HDR視訊串流、和屬於HDR視訊串流之再生控制資訊的mfra(movie fragment random access box)。
在mfra中係含有,用來指定隨機存取點的資訊。在構成MP4之HDR內容的HDR視訊串流的圖像之中,至少對藉由mfra中所含之資訊而被指定的圖像,會被附加有Dynamic metadata。藉此,也可防止跳躍目的地之圖像的亮度壓縮,會以非HDR內容製作者之意圖的形式而被進行。
此種MP4之格式的HDR內容也是,可藉由具有和圖13、圖14所示之構成相同之構成的資訊處理裝置,而被生成。例如,已被編碼處理部22所生成之HDR視訊串流和已被Data Base資訊生成部33所生成之mfra,是依照MP4之格式而被多工化,生成HDR內容。
<關於Clip Information的EP_map> 圖20係Clip Information之語法的圖示。針對Clip Information中所含之主要描述,加以說明。
如圖20所示,Clip Information係含有:ClipInfo()、SequenceInfo()、ProgramInfo()、CPI()、ClipMark()、ExtensionData()之各描述。
ClipInfo(),係為使用Clip Information而被進行再生的AV串流之屬性的相關之資訊所被描述的欄位。
SequenceInfo(),係為構成AV串流的source packet之序列的相關之資訊所被描述的欄位。
ProgramInfo(),係為構成程式的source packet之序列的相關之資訊所被描述的欄位。
CPI(),係為表示AV串流之時刻與位置之對應關係的資訊所被描述的欄位。EP_map,係也被描述在CPI()中。
圖21係為CPI()之語法的圖示。
如圖21所示,CPI()中係描述有CPI_type與EP_map()。
CPI_type之值為1的情況下,CPI()中係會含有EP_map之資訊。
圖22係為EP_map()之語法的圖示。
stream_PID,係表示將HDR視訊之資料予以儲存的TS封包的PID。
number_of_EP_coarse_entries,係表示EP_map()中所含的EP-coarse-entry之數量。EP-coarse-entry,係為1秒單位等之精度較粗的進入點之資訊。
number_of_EP_fine_entries,係表示EP_map()中所含的EP-fine-entry之數量。EP-fine-entry,係為精度比EP-coarse-entry還高的進入點之資訊。藉由EP-coarse-entry與EP-fine-entry之組合,進入點係被指定。
EP_map_for_one_stream_PID係含有,各個EP-coarse-entries與EP-fine-entries之資訊。
圖23係為EP_map_for_one_stream_PID之語法的圖示。
PTS_EP_coarse[i],係表示EP-coarse-entry的PTS(時刻)。
SPN_EP_coarse[i],係表示對應於 PTS_EP_coarse[i]的,HDR視訊串流上的source packet(位置)。
PTS_EP_fine[i],係表示EP-fine-entry的PTS。
SPN_EP_fine[i],係表示對應於PTS_EP_fine[i]的,HDR視訊串流上的source packet。
再生裝置1,係在基於EP_map而進行隨機存取再生的情況下,藉由解析EP_map_for_one_stream_PID,而進行將儲存有進入點之圖像之資料的source packet在HDR視訊串流上之位置加以特定的處理等。對進入點的圖像,係如上述般地,被附加有Dynamic metadata。
<記錄裝置的動作> 參照圖24的流程圖,說明對被EP_map所指定的進入點之圖像附加Dynamic metadata而生成HDR視訊串流的記錄裝置3的記錄處理。
圖24的處理,係除了母片之視訊的編碼之限制為不同的這點以外,其餘是和參照圖17所說明之處理相同的處理。關於重複的說明則會適宜省略。
亦即,於步驟S31中,控制器21的Dynamic metadata生成部31,係依照內容之製作者所致之輸入而設定各參數之值,生成Dynamic metadata。
於步驟S32中,Data Base資訊生成部33,係生成描述有PlayList、EP_map的Clip Information等之Data Base資訊。Data Base資訊生成部33,係將描述有EP_map的各進入點(EP entry)之資訊,輸出至編碼控制部32。
於步驟S33中,編碼處理部22,係依照編碼控制部32所致之控制,在對被EP_map所指定之進入點的圖像必定會附加Dynamic metadata的此一限制之下,進行母片之視訊的編碼,生成HDR視訊串流。
於步驟S34中,碟片驅動機23,係將從控制器21所被供給之Data Base資訊之檔案,和從編碼處理部22所被供給之AV串流之檔案予以記錄,以生成光碟11。其後,處理就結束。
藉由以上的處理,記錄裝置3,係生成對被EP_map所指定的會變成隨機存取點之圖像會被附加有Dynamic metadata的HDR視訊串流,可提供含有此種HDR視訊串流的HDR內容。
<變形例> 雖然針對對GOP之開頭的圖像附加Dynamic metadata的情況、與對被EP_map所指定的圖像附加Dynamic metadata的情況進行了說明,但亦可將這些限制加以組合而使用。
亦即,亦可使得對GOP之開頭的圖像與被EP_map所指定的圖像之雙方都必定會附加Dynamic metadata的方式,來進行HDR視訊串流的編碼。
對跳躍目的地之圖像未被附加有Dynamic metadata的情況下,亦可將對跳躍目的地之圖像之附近的圖像所被附加的Dynamic metadata從再生裝置1傳輸至TV2,而使用於跳躍目的地之圖像的亮度壓縮。
≪第2實施形態(使用預設後設資料的例子)≫ <在隨機存取再生時使用預設後設資料的例子> 圖25係隨機存取再生時的後設資料之傳輸例的圖示。
在隨機存取再生時,於再生裝置1中,表示隨機存取再生之內容的OSD影像,係會被合成至例如跳躍目的地之圖像。已被合成有OSD影像的圖像,係並非Dynamic metadata,而是如圖25所示般地連同隨機存取再生時用的後設資料也就是預設後設資料一起被輸出至TV2。
預設後設資料係具有例如,與參照圖3所說明的Dynamic metadata之參數相同的參數。預設後設資料之各參數中係被設定有例如,用來使各種類之OSD影像是以適切的亮度而被顯示所需之固定值。預設後設資料係例如,以被記憶在再生裝置1內的記憶體53中的形式,而被事前準備在再生裝置1中。
圖26係為亮度壓縮後之顯示的圖示。
例如,如圖26的左側所示般地在較高亮度之場景正被顯示的狀態下,當快轉再生等之隨機存取再生被指示的情況下,連同已被合成有OSD影像的跳躍目的地之圖像,預設後設資料會一起被輸出至TV2。
於TV2中,係基於從再生裝置1所被傳輸過來的預設後設資料,而進行已被合成有OSD影像的圖像的亮度壓縮,如箭頭A12之尖端所示般地,HDR視訊之亮度會被降低。亦即,若假設使用Dynamic metadata而進行亮度壓縮後的亮度,是箭頭A11之尖端所示的HDR視訊的原本之亮度,則比原本之亮度還暗的HDR視訊,會被顯示。
由於是被設定了適合於OSD影像之值的後設資料,因此藉由使用預設後設資料的亮度壓縮,如箭頭A12之尖端所示,OSD影像本身的亮度係為理想。
如此,在隨機存取再生時,在跳躍目的地之圖像的亮度壓縮時會使用預設後設資料,因此各圖像之OSD影像之亮度係為一定,可防止OSD影像看起來發生閃爍。
・再生裝置的構成與動作 圖27係在隨機存取再生時將預設後設資料予以傳輸時的控制器51之機能構成例的區塊圖。再生裝置1的構成係和圖15的構成相同。
於控制器51中,Data Base資訊解析部101、輸出控制部102、及預設後設資料生成部103係被實現。圖27所示之機能部的其中至少一部分,係藉由控制器51的CPU執行所定程式,而被實現。
Data Base資訊解析部101,係將從碟片驅動機52所被供給之Data Base資訊加以解析,將表示解析結果的資訊,輸出至輸出控制部102和預設後設資料生成部103。輸出控制部102和預設後設資料生成部103所致之處理,係適宜地參照Data Base資訊之解析結果而被進行。
輸出控制部102,係藉由控制解碼處理部56和外部輸出部58,以控制HDR視訊的輸出。
例如,輸出控制部102,係令解碼處理部56將HDR視訊串流予以解碼。又,輸出控制部102,係控制外部輸出部58,令其對HDR視訊串流解碼所得之各圖像,附加Dynamic metadata然後輸出。
輸出控制部102,係在隨機存取再生有被指示的情況下,令解碼處理部56將HDR視訊串流予以解碼,並對跳躍目的地之圖像合成OSD影像。又,輸出控制部102,係控制外部輸出部58,令其對已被合成有OSD影像的圖像附加預設後設資料然後輸出。
預設後設資料生成部103,係藉由設定固定值來作為各參數之值,而生成預設後設資料。預設後設資料生成部103,係具有對各參數所設定之固定值之資訊。預設後設資料生成部103,係將已生成之預設後設資料輸出至記憶體53並記憶之。
如此,預設後設資料係亦可在再生裝置1內被生成。又,亦可為,預設後設資料,是在再生裝置1之製造時等的時序上就被記憶在記憶體53,而被事前準備在再生裝置1中。
亦可設計成,預設後設資料之各參數中所設定的值,是可讓使用者來做指定。此情況下,例如是使用再生裝置1的設定畫面,來設定各參數之值。
又,亦可設計成,讓使用者可以選擇,是否把從再生裝置1所被傳輸過來的預設後設資料,在TV2側加以參照還是忽視。此情況下,例如是使用TV2的設定畫面,來進行是否參照或是忽視預設後設資料的設定。
預設後設資料之各參數中所設定的值,係亦可從伺服器加以取得。
此情況下,伺服器中係例如,與光碟11中所被記錄之HDR內容建立對應,而準備要對預設後設資料之各參數做設定的值的資訊。預設後設資料生成部103,係將從伺服器所取得的值當作各參數之值而加以設定,藉此就會生成光碟11中所被記錄之HDR內容用的預設後設資料。
又,預設後設資料亦可從伺服器而被下載。被下載、而被通訊部55所接收的預設後設資料,係被輸出至記憶體53而記憶之。
接著,參照圖28的流程圖,說明隨機存取再生時會將預設後設資料予以傳輸而再生HDR內容的再生裝置1之處理。
圖28的處理,基本上,除了隨機存取再生有被指示時,對各圖像所附加的後設資料是有所不同這點以外,其餘是和參照圖18所說明之處理相同的處理。
亦即,於步驟S101中,碟片驅動機52,係將包含有PlayList檔案的Data Base資訊之檔案,從光碟11中讀出。
於步驟S102中,控制器51的Data Base資訊解析部101,係將PlayList檔案加以解析,進行再生對象之AV串流的特定等。
於步驟S103中,碟片驅動機52,係將含有再生對象之HDR視訊串流的AV串流之檔案,從光碟11中讀出。
於步驟S104中,解碼處理部56,係將從碟片驅動機52所被供給之AV串流中所含之HDR視訊串流予以解碼,將各圖像之資料輸出至外部輸出部58。HDR視訊串流中所含之Dynamic metadata係從解碼處理部56被供給至控制器51。
於步驟S105中,外部輸出部58,係依照輸出控制部102所致之控制,而對從解碼處理部56所被供給之HDR視訊之各圖像,附加從輸出控制部102所被供給之Dynamic metadata,然後輸出至TV2。
於步驟S106中,控制器51係判定是否進行隨機存取再生。若於步驟S106中判定為不進行隨機存取再生,亦即要進行通常再生時,則回到步驟S105,繼續HDR視訊之各圖像的輸出。
另一方面,於步驟S106中,若判定為要進行隨機存取再生,則處理係前進至步驟S107。快轉再生/回捲再生被使用者所指示的情況下,或者,章節選擇再生被使用者所指示的情況下,則於步驟S106中判定為要進行隨機存取再生。
於步驟S107中,解碼處理部56係將身為隨機存取點的跳躍目的地之圖像,予以解碼。
於步驟S108中,解碼處理部56,係對跳躍目的地之圖像,合成OSD影像。
於步驟S109中,外部輸出部58,係對已被合成有OSD影像的跳躍目的地之圖像,附加預設後設資料然後予以輸出。連同跳躍目的地之圖像一起被輸出的預設後設資料,係從控制器51的輸出控制部102被供給。
其後,回到步驟S106,重複以上的處理。例如,已被使用者所指示的隨機存取再生是快轉再生/回捲再生的情況下,GOP之開頭的圖像係被依序解碼,各個GOP之開頭的圖像,係連同預設後設資料一起被輸出。
・TV的動作 接著,參照圖29的流程圖,說明TV2的顯示處理。
圖29的處理,係在HDR視訊串流解碼所得之圖像之傳輸被開始時,會被進行。從再生裝置1所被傳輸過來的圖像中,係被附加有Dynamic metadata或預設後設資料。
於步驟S121中,TV2的外部輸入部72,係將從從再生裝置1所被傳輸過來的HDR視訊之各圖像之資料,和附加於其而被傳輸過來的Dynamic metadata或預設後設資料,予以接收。
在隨機存取再生未被指示的情況下,此處係為各圖像與Dynamic metadata會被接收。又,於再生裝置1中隨機存取再生有被指示的情況,此處則是,已被合成有OSD影像的圖像、與預設後設資料,會被接收。
已被外部輸入部72所接收之各圖像之資料係被供給至訊號處理部73,後設資料(Dynamic metadata或預設後設資料)係被供給至控制器71。
於步驟S122中,訊號處理部73,係依照控制器71所致之控制,而進行HDR視訊之各圖像的亮度壓縮。若連同各圖像而一起被傳輸過來的後設資料是Dynamic metadata,則基於Dynamic metadata而進行亮度壓縮。又,若連同各圖像而一起被傳輸過來的後設資料是預設後設資料,則基於預設後設資料而進行亮度壓縮。
於步驟S123中,訊號處理部73,係令顯示器74顯示出亮度壓縮後的圖像。如此一連串之處理所成的HDR視訊之顯示,係一直被持續直到HDR內容之再生結束為止。
如以上所述,隨機存取再生時的TV2中的亮度壓縮是基於預設後設資料而被進行,藉此,可以防止被合成至各圖像的OSD影像看起來發生閃爍。
<在跳躍目的地沒有Dynamic metadata的情況下使用預設後設資料的例子> 亦可在隨機存取再生時並非必定使用預設後設資料,而是在跳躍目的地之圖像中未被附加有Dynamic metadata的情況下才使用預設後設資料,並傳輸至TV2。
圖30係為隨機存取再生之例子的圖示。
例如,再生對象之圖像變成圖像P1的時序上被指示了章節選擇再生,如圖30的箭頭A1所示,針對從圖像P1跳躍至圖像P2的情況,加以說明。
此情況下,於再生裝置1中,會進行圖像P2之解析,進行Dynamic metadata是否有被附加之偵測。若圖像P2係為未被附加Dynamic metadata之區間內的圖像,則使用預設後設資料,連同圖像P2一起被輸出。
例如,若圖像P2中有被附加Dynamic metadata,則連同圖像P2而Dynamic metadata會一起被輸出。
如此,亦可為,在跳躍目的地之圖像中有被附加Dynamic metadata之情況下則Dynamic metadata會被傳輸,在未被附加有Dynamic metadata的情況下則是預設後設資料會被傳輸。
此處,參照圖31的流程圖,說明將HDR內容予以再生的再生裝置1之處理。
圖31的處理,係除了傳輸至TV2的後設資料,會隨著跳躍目的地之圖像中是否有被附加Dynamic metadata而做切換這點以外,其餘是和圖28的處理相同的處理。
亦即,於步驟S131乃至S135中,和圖28的步驟S101乃至S105同樣地進行HDR內容的通常再生。
於步驟S136中若判定為要進行隨機存取再生,則於步驟S137中,解碼處理部56係將身為隨機存取點的跳躍目的地之圖像,予以解碼。
於步驟S138中,解碼處理部56,係對跳躍目的地之圖像,合成OSD影像。
於步驟S139中,解碼處理部56係判定,跳躍目的地之圖像中是否有被附加Dynamic metadata。
在步驟S139中判定為未被附加Dynamic metadata的情況下,則於步驟S140中,外部輸出部58係對已被合成有OSD影像的跳躍目的地之圖像,附加預設後設資料然後予以輸出。
另一方面,在步驟S139中判定為有被附加Dynamic metadata的情況下,則於步驟S141中,外部輸出部58係對已被合成有OSD影像的跳躍目的地之圖像,附加Dynamic metadata然後予以輸出。
於步驟S140或步驟S141中圖像被輸出後,回到步驟S136,重複以上之處理。
如此,亦可把會使用預設後設資料的情況,限定成只有在跳躍目的地之圖像中未被附加有Dynamic metadata的情況,在有被附加Dynamic metadata的情況下,則使Dynamic metadata被傳輸至TV2。藉此,就可使得跳躍目的地之圖像的亮度壓縮,是按照HDR內容製作者之意圖般地被進行。
≪再生系統的構成例≫ <第1構成例> 雖然針對HDR內容被記錄在光碟11中的情況加以說明,但如上述,在透過網路而被配訊之HDR內容進行再生的情況下,也可適用以上之處理。
圖32係HDR內容的再生系統之構成例的圖示。
圖32的再生系統,係由再生裝置1與內容配訊伺服器301,透過網際網路等之網路302被連接而構成。對再生裝置1,係透過HDMI纜線等而被連接有TV2。再生裝置1所再生的HDR內容之映像係被顯示於TV2。
內容配訊伺服器301,係由提供HDR內容之配訊服務的事業者所管理的伺服器。內容配訊伺服器301所配訊的內容係為HDR內容。
各個HDR內容,係藉由將含有Dynamic metadata的HDR視訊串流之檔案與再生控制資訊之檔案建立對應而被構成。
例如,使用者操作再生裝置1而向內容配訊伺服器301進行存取時,TV2中係會顯示出HDR內容的選擇畫面。使用者,係可選擇所定之HDR內容,而向內容配訊伺服器301要求開始觀賞。
HDR內容被選擇的情況下,內容配訊伺服器301,係將已被選擇的HDR內容,發送至再生裝置1。
再生裝置1,係將從內容配訊伺服器301所被發送過來的HDR內容予以接收,藉由進行和上述的再生處理相同的處理,以進行HDR內容的再生。
亦即,從再生裝置1對TV2,係係有將HDR視訊串流進行解碼所得的各圖像連同Dynamic metadata一起被傳輸,基於Dynamic metadata而進行亮度壓縮。
又,隨機存取再生有被指示的情況下,則連同HDR視訊之各圖像,跳躍目的地之圖像中所被附加之Dynamic metadata係一起被傳輸,於TV2中,會基於Dynamic metadata而進行亮度壓縮。對身為跳躍目的地的GOP開頭之圖像、或藉由EP_map等而被指定作為進入點的圖像,係被附加有Dynamic metadata。
再者,若預設後設資料有被準備在再生裝置1中的情況下,隨應於隨機存取再生已被指示之事實,跳躍目的地之圖像連同預設後設資料會一起被傳輸,於TV2中,基於預設後設資料而進行亮度壓縮。
如此,亦可使含有對GOP之開頭的圖像、或被指定作為進入點的圖像必定會被附加有Dynamic metadata的HDR視訊串流的HDR內容,從內容配訊伺服器301被配訊。
又,構成內容配訊伺服器301所配訊之HDR內容的HDR視訊串流進行隨機存取再生的情況下,亦可使預設後設資料從再生裝置1被輸出至TV2。
圖33係為再生裝置1之另一構成例的圖示。
如圖33所示,再生裝置1係亦可為所謂的棒狀型之終端。圖33所示的再生裝置1之框體上係設有HDMI端子。藉由將被設在框體的HDMI端子插入至TV2的HDMI端子,再生裝置1與TV2就被連接。
例如,在圖33的再生裝置1中係設有,圖15所示之構成之中的,除了碟片驅動機52以外之構成。再生裝置1,係藉由進行和上述之處理相同之處理,以進行內容配訊伺服器301所配訊之HDR內容的再生。
如此,作為再生裝置1的形態,係可採用各種形態。例如,亦可在智慧型手機或平板終端等之攜帶型的終端搭載再生裝置1之機能,亦可在PC等之終端中搭載再生裝置1之機能。
<第2構成例> 再生裝置1之機能係亦可被搭載於TV2。
圖34係為HDR內容的另一再生系統之構成例的圖示。
圖34的再生系統,係由搭載了再生裝置1之機能的TV2與內容配訊伺服器301,透過網路302被連接而構成。關於重複的說明則會適宜省略。
TV2,係基於從內容配訊伺服器301所被發送過來的資訊,而令HDR內容的選擇畫面被顯示。
藉由使用者而選擇了所定之HDR內容的情況下,內容配訊伺服器301,係將已被選擇的HDR內容,發送至TV2。
TV2,係將從內容配訊伺服器301所被發送過來的HDR內容予以接收,進行HDR內容的再生。
亦即,TV2,係基於Dynamic metadata而進行HDR視訊之各圖像的亮度壓縮。
又,在隨機存取再生有被指示的情況下,跳躍目的地之圖像的亮度壓縮,是基於跳躍目的地之圖像中所被附加之Dynamic metadata而被進行。
再者,在預設後設資料有被準備在TV2中的情況下,當隨機存取再生被指示時,則跳躍目的地之圖像的亮度壓縮是基於預設後設資料而被進行。
如此,亦可再生裝置1之機能是被設在TV2,於TV2中,進行如上述的處理。
≪其他例≫ HDR內容之記錄媒體雖然假設是光碟,但亦可為快閃記憶體等之其他記錄媒體。
基於Dynamic metadata或預設後設資料而對視訊進行的處理雖然假設是亮度壓縮,但亦可於TV2中進行亮度擴展。此情況下,在Dynamic metadata或預設後設資料中係描述有,亮度擴展時所被使用之色調曲線之資訊。
雖然假設被輸入至再生裝置1的視訊串流是以所定之方式而被編碼的視訊串流,但亦可為,由已被附加有Dynamic metadata之圖像所構成的,未被壓縮的視訊串流,係被輸入至再生裝置1。
<電腦之構成例> 上述一連串處理,係可藉由硬體來執行,也可藉由軟體來執行。以軟體來執行一連串處理時,構成該軟體的程式,是從程式記錄媒體,安裝至內嵌有專用硬體的電腦,或是泛用之個人電腦等。
圖35係以程式來執行上述一連串處理的電腦的硬體之構成例的區塊圖。
CPU(Central Processing Unit)1001、ROM(Read Only Memory)1002、RAM(Random Access Memory)1003,係藉由匯流排1004而被彼此連接。
在匯流排1004上係還連接有輸出入介面1005。輸出入介面1005上則連接著,由鍵盤、滑鼠等所成之輸入部1006、和由顯示器、揚聲器等所成之輸出部1007。又,在輸出入介面1005上係連接有,由硬碟或非揮發性記憶體等所成之記憶部1008、由網路介面等所成之通訊部1009、驅動可移除式媒體1011用的驅動機1010。
在如以上構成的電腦中,藉由CPU1001而例如將記憶部1008中所記憶之程式透過輸出入介面1005及匯流排1004,而載入至RAM1003裡並加以執行,就可進行上述一連串處理。
CPU1001所執行之程式,係記錄在例如可移除式媒體1011,或者是透過區域網路、網際網路、數位播送這類有線或無線之傳輸媒體而提供,然後被安裝在記憶部1008中。
此外,電腦所執行的程式,係可為依照本說明書所說明之順序而在時間序列上進行處理的程式,也可平行地,或呼叫進行時等必要之時序上進行處理的程式。
本技術的實施形態係不限定於上述實施形態,在不脫離本技術主旨的範圍內可做各種變更。
例如,本技術係亦可將1個機能透過網路而分擔給複數台裝置,採取共通進行處理的雲端運算之構成。
又,上述的流程圖中所說明的各步驟,係可由1台裝置來執行以外,亦可由複數台裝置來分擔執行。
甚至,若1個步驟中含有複數處理的情況下,該1個步驟中所含之複數處理,係可由1台裝置來執行以外,也可由複數台裝置來分擔執行。
於本說明書中,所謂的系統,係意味著複數構成要素(裝置、模組(零件)等)的集合,所有構成要素是否位於同一框體內則在所不問。因此,被收納在個別的框體中,透過網路而連接的複數台裝置、及在1個框體中收納有複數模組的1台裝置,均為系統。
本說明書中所記載之效果僅為例示並非限定,亦可還有其他效果。
<構成之組合例> 本技術係亦可採取如以下之構成。
(1) 一種資訊處理裝置,係具備: 生成部,係生成含有圖像之亮度資訊的動態後設資料;和 編碼部,係以對會變成隨機存取點之圖像之每一者附加前記動態後設資料的方式,來進行HDR視訊之資料的編碼。 (2) 如前記(1)所記載之資訊處理裝置,其中, 前記編碼部,係將GOP之開頭的圖像,視為會變成前記隨機存取點之圖像而附加前記動態後設資料。 (3) 如前記(1)所記載之資訊處理裝置,其中, 還具備:生成部,係生成:藉由進行前記編碼而獲得之視訊串流之再生時所被使用的,含有用來指定前記隨機存取點之資訊的再生控制資訊; 前記編碼部,係對藉由前記再生控制資訊中所含之資訊而被指定的前記隨機存取點之圖像,附加前記動態後設資料。 (4) 如前記(3)所記載之資訊處理裝置,其中, 用來指定前記隨機存取點之資訊,係為Blu-ray Disc格式中所被規定的,作為前記再生控制資訊的Clip Information中所含之EP_map; 前記編碼部,係對在EP_map中被指定作為前記隨機存取點的每個進入點之圖像,附加前記動態後設資料。 (5) 如前記(3)所記載之資訊處理裝置,其中, 用來指定前記隨機存取點之資訊,係為MP4格式中所被規定的,作為前記再生控制資訊的Movie Fragment Random Access Box; 前記編碼部,係對藉由Movie Fragment Random Access Box而被指定的每個前記隨機存取點之圖像,附加前記動態後設資料。 (6) 一種資訊處理方法,係: 由資訊處理裝置, 生成含有圖像之亮度資訊的動態後設資料; 以對會變成隨機存取點之圖像之每一者附加前記動態後設資料的方式,來進行HDR視訊之資料的編碼。 (7) 一種程式,係用以令電腦執行以下處理: 生成含有圖像之亮度資訊的動態後設資料; 以對會變成隨機存取點之圖像之每一者附加前記動態後設資料的方式,來進行HDR視訊之資料的編碼。 (8) 一種記錄媒體,係被記錄有: 以對會變成隨機存取點之圖像之每一者附加含有亮度資訊之動態後設資料的方式,來進行HDR視訊之資料的編碼所生成的視訊串流。 (9) 一種再生裝置,係具備: 再生部,係進行視訊串流的隨機存取再生,該視訊串流係為:以對會變成隨機存取點之圖像之每一者附加含有亮度資訊之動態後設資料的方式,來進行HDR視訊之資料的編碼,而被生成者; 輸出控制部,係將前記隨機存取點之圖像,連同前記動態後設資料一起輸出至顯示裝置。 (10) 一種再生裝置,係具備: 再生部,係進行已被附加含有圖像之亮度資訊的動態後設資料的視訊串流的隨機存取再生;和 輸出控制部,係在令表示隨機存取再生會被進行的所定之資訊重疊於前記圖像而顯示的情況下,對隨機存取點的前記圖像,附加隨機存取再生時的亮度調整中所使用的隨機存取再生時用之後設資料,將已附加前記隨機存取再生時用之後設資料的前記圖像,輸出至顯示裝置。 (11) 如前記(10)所記載之再生裝置,其中, 前記再生部,作為隨機存取再生,是進行所定之倍速下的快轉再生或回捲再生。 (12) 如前記(10)或(11)所記載之再生裝置,其中, 前記再生部,作為隨機存取再生,是進行章節選擇再生。 (13) 一種再生方法,係 由再生裝置, 進行已被附加含有圖像之亮度資訊的動態後設資料的視訊串流的隨機存取再生; 在令表示隨機存取再生會被進行的所定之資訊重疊於前記圖像而顯示的情況下,對隨機存取點的前記圖像,附加隨機存取再生時的亮度調整中所使用的隨機存取再生時用之後設資料; 將已附加前記隨機存取再生時用之後設資料的前記圖像,輸出至顯示裝置。 (14) 一種程式,係用以令電腦執行以下處理: 進行已被附加含有圖像之亮度資訊的動態後設資料的視訊串流的隨機存取再生; 在令表示隨機存取再生會被進行的所定之資訊重疊於前記圖像而顯示的情況下,對隨機存取點的前記圖像,附加隨機存取再生時的亮度調整中所使用的隨機存取再生時用之後設資料; 將已附加前記隨機存取再生時用之後設資料的前記圖像,輸出至顯示裝置。
1‧‧‧再生裝置 2‧‧‧TV 3‧‧‧記錄裝置 21‧‧‧控制器 22‧‧‧編碼處理部 23‧‧‧碟片驅動機 31‧‧‧Dynamic metadata生成部 32‧‧‧編碼控制部 33‧‧‧Data Base資訊生成部 34‧‧‧記錄控制部 51‧‧‧控制器 52‧‧‧碟片驅動機 53‧‧‧記憶體 54‧‧‧本機儲存體 55‧‧‧通訊部 56‧‧‧解碼處理部 57‧‧‧操作輸入部 58‧‧‧外部輸出部 71‧‧‧控制器 72‧‧‧外部輸入部 73‧‧‧訊號處理部 74‧‧‧顯示器 75‧‧‧播送收訊部 76‧‧‧解碼處理部 77‧‧‧通訊部 101‧‧‧Data Base資訊解析部 102‧‧‧輸出控制部 103‧‧‧預設後設資料生成部 301‧‧‧內容配訊伺服器 302‧‧‧網路 1001‧‧‧CPU 1002‧‧‧ROM 1003‧‧‧RAM 1004‧‧‧匯流排 1005‧‧‧輸出入介面 1006‧‧‧輸入部 1007‧‧‧輸出部 1008‧‧‧記憶部 1009‧‧‧通訊部 1010‧‧‧驅動機 1011‧‧‧可移除式媒體
[圖1]HDR內容的再生系統之構成例的圖示。 [圖2]HDR視訊之亮度壓縮時所被使用之色調曲線之例子的圖示。 [圖3]SMPTE ST 2094-40中所被規定之Dynamic metadata的圖示。 [圖4]BD之檔案結構的圖示。 [圖5]AV串流之結構之例子的圖示。 [圖6]Dynamic metadata之傳輸例的圖示。 [圖7]隨機存取再生之例子的圖示。 [圖8]隨機存取再生時之顯示例的圖示。 [圖9]構成HDR視訊串流的GOP之例子的圖示。 [圖10]BD-ROM格式中的AV串流之管理結構之例子的圖示。 [圖11]Main Path與Sub Path之結構的圖示。 [圖12]檔案之管理結構之例子的圖示。 [圖13]記錄裝置之構成例的區塊圖。 [圖14]圖13的控制器之機能構成例的區塊圖。 [圖15]再生裝置之構成例的區塊圖。 [圖16]TV之構成例的區塊圖。 [圖17]記錄裝置之記錄處理的說明用流程圖。 [圖18]再生裝置之再生處理的說明用流程圖。 [圖19]HDR視訊串流之例子的圖示。 [圖20]Clip Information之語法的圖示。 [圖21]CPI()之語法的圖示。 [圖22]EP_map()之語法的圖示。 [圖23]EP_map_for_one_stream_PID之語法的圖示。 [圖24]記錄裝置之記錄處理的說明用流程圖。 [圖25]隨機存取再生時的後設資料之傳輸例的圖示。 [圖26]亮度壓縮後的顯示的圖示。 [圖27]圖15的控制器之機能構成例的區塊圖。 [圖28]再生裝置之另一再生處理的說明用流程圖。 [圖29]TV之顯示處理的說明用流程圖。 [圖30]隨機存取再生之例子的圖示。 [圖31]再生裝置之再另一再生處理的說明用流程圖。 [圖32]HDR內容的再生系統之構成例的圖示。 [圖33]再生裝置之另一構成例的圖示。 [圖34]HDR內容的另一再生系統之構成例的圖示。 [圖35]電腦之構成例的區塊圖。
1‧‧‧再生裝置
2‧‧‧TV

Claims (14)

  1. 一種資訊處理裝置,係具備:生成部,係生成含有圖像之亮度資訊的動態後設資料;和編碼部,係以對會變成隨機存取點之圖像之每一者附加前記動態後設資料的方式,來進行HDR視訊之資料的編碼;在令表示隨機存取再生會被進行的所定之資訊重疊於前記圖像而顯示的情況下,前記動態後設資料,係為了對隨機存取點的前記圖像,附加隨機存取再生時的亮度調整中所使用的隨機存取再生時用之後設資料,而被使用;前記生成部及前記編碼部,係分別藉由至少1個處理器而被實作。
  2. 如請求項1所記載之資訊處理裝置,其中,前記編碼部,係將GOP之開頭的圖像,視為會變成前記隨機存取點之圖像而附加前記動態後設資料。
  3. 如請求項1所記載之資訊處理裝置,其中,還具備:生成部,係生成:藉由進行前記編碼而獲得之視訊串流之再生時所被使用的,含有用來指定前記隨機存取點之資訊的再生控制資訊;前記編碼部,係對藉由前記再生控制資訊中所含之資 訊而被指定的前記隨機存取點之圖像,附加前記動態後設資料。
  4. 如請求項3所記載之資訊處理裝置,其中,用來指定前記隨機存取點之資訊,係為Blu-ray Disc格式中所被規定的,作為前記再生控制資訊的Clip Information中所含的EP_map;前記編碼部,係對在EP_map中被指定作為前記隨機存取點的每個進入點之圖像,附加前記動態後設資料。
  5. 如請求項3所記載之資訊處理裝置,其中,用來指定前記隨機存取點之資訊,係為MP4格式中所被規定的,作為前記再生控制資訊的Movie Fragment Random Access Box;前記編碼部,係對藉由Movie Fragment Random Access Box而被指定的每個前記隨機存取點之圖像,附加前記動態後設資料。
  6. 一種資訊處理方法,係:由資訊處理裝置,生成含有圖像之亮度資訊的動態後設資料;以對會變成隨機存取點之圖像之每一者附加前記動態後設資料的方式,來進行HDR視訊之資料的編碼;在令表示隨機存取再生會被進行的所定之資訊重疊於 前記圖像而顯示的情況下,前記動態後設資料,係為了對隨機存取點的前記圖像,附加隨機存取再生時的亮度調整中所使用的隨機存取再生時用之後設資料,而被使用。
  7. 一種程式,係用以令電腦執行以下處理:生成含有圖像之亮度資訊的動態後設資料;以對會變成隨機存取點之圖像之每一者附加前記動態後設資料的方式,來進行HDR視訊之資料的編碼;在令表示隨機存取再生會被進行的所定之資訊重疊於前記圖像而顯示的情況下,前記動態後設資料,係為了對隨機存取點的前記圖像,附加隨機存取再生時的亮度調整中所使用的隨機存取再生時用之後設資料,而被使用。
  8. 一種記錄媒體,係被記錄有:以對會變成隨機存取點之圖像之每一者附加含有亮度資訊之動態後設資料的方式,來進行HDR視訊之資料的編碼所生成的視訊串流;在令表示隨機存取再生會被進行的所定之資訊重疊於前記圖像而顯示的情況下,前記動態後設資料,係為了對隨機存取點的前記圖像,附加隨機存取再生時的亮度調整中所使用的隨機存取再生時用之後設資料,而被使用。
  9. 一種再生裝置,係具備:再生部,係進行視訊串流的隨機存取再生,該視訊串 流係為:以對會變成隨機存取點之圖像之每一者附加含有亮度資訊之動態後設資料的方式,來進行HDR視訊之資料的編碼,而被生成者;輸出控制部,係將前記隨機存取點之圖像,連同前記動態後設資料一起輸出至顯示裝置;在令表示隨機存取再生會被進行的所定之資訊重疊於前記圖像而顯示的情況下,前記動態後設資料,係為了對隨機存取點的前記圖像,附加隨機存取再生時的亮度調整中所使用的隨機存取再生時用之後設資料,而被使用;前記再生部及前記輸出控制部,係分別藉由至少1個處理器而被實作。
  10. 一種再生裝置,係具備:再生部,係進行已被附加含有圖像之亮度資訊的動態後設資料的視訊串流的隨機存取再生;和輸出控制部,係在令表示隨機存取再生會被進行的所定之資訊重疊於前記圖像而顯示的情況下,對隨機存取點的前記圖像,附加隨機存取再生時的亮度調整中所使用的隨機存取再生時用之後設資料,將已附加前記隨機存取再生時用之後設資料的前記圖像,輸出至顯示裝置。
  11. 如請求項10所記載之再生裝置,其中,前記再生部,作為隨機存取再生,是進行所定之倍速下的快轉再生或回捲再生。
  12. 如請求項10所記載之再生裝置,其中,前記再生部,作為隨機存取再生,是進行章節選擇再生。
  13. 一種再生方法,係由再生裝置,進行已被附加含有圖像之亮度資訊的動態後設資料的視訊串流的隨機存取再生;在令表示隨機存取再生會被進行的所定之資訊重疊於前記圖像而顯示的情況下,對隨機存取點的前記圖像,附加隨機存取再生時的亮度調整中所使用的隨機存取再生時用之後設資料;將已附加前記隨機存取再生時用之後設資料的前記圖像,輸出至顯示裝置。
  14. 一種程式,係用以令電腦執行以下處理:進行已被附加含有圖像之亮度資訊的動態後設資料的視訊串流的隨機存取再生;在令表示隨機存取再生會被進行的所定之資訊重疊於前記圖像而顯示的情況下,對隨機存取點的前記圖像,附加隨機存取再生時的亮度調整中所使用的隨機存取再生時用之後設資料;將已附加前記隨機存取再生時用之後設資料的前記圖像,輸出至顯示裝置。
TW107139426A 2017-11-17 2018-11-07 資訊處理裝置、資訊處理方法、記錄媒體、再生裝置、再生方法、及程式 TWI826400B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017-221549 2017-11-17
JP2017221549 2017-11-17

Publications (2)

Publication Number Publication Date
TW201929541A TW201929541A (zh) 2019-07-16
TWI826400B true TWI826400B (zh) 2023-12-21

Family

ID=66540332

Family Applications (1)

Application Number Title Priority Date Filing Date
TW107139426A TWI826400B (zh) 2017-11-17 2018-11-07 資訊處理裝置、資訊處理方法、記錄媒體、再生裝置、再生方法、及程式

Country Status (7)

Country Link
US (1) US11245941B2 (zh)
EP (1) EP3712891B1 (zh)
JP (3) JP7180610B2 (zh)
KR (1) KR102624024B1 (zh)
CN (1) CN111344787B (zh)
TW (1) TWI826400B (zh)
WO (1) WO2019098054A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11870948B2 (en) * 2020-05-26 2024-01-09 Dolby Laboratories Licensing Corporation Picture metadata for variable frame-rate video

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110314174A1 (en) * 2010-06-18 2011-12-22 Samsung Electronics Co., Ltd. Storage file format for multimedia streaming file, and storage method and client apparatus using the same
US20120162366A1 (en) * 2010-12-27 2012-06-28 Dolby Laboratories Licensing Corporation 3D Cameras for HDR
US20160301907A1 (en) * 2014-09-08 2016-10-13 Sony Corporation Information processing apparatus, information recording medium, information processing method, and program
US20160330513A1 (en) * 2014-08-19 2016-11-10 Panasonic Intellectual Property Management Co., Ltd. Method for transmitting appropriate meta data to display device according to transmission protocol version

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013034163A (ja) 2011-06-03 2013-02-14 Sony Corp 画像処理装置及び画像処理方法
CN110867198B (zh) 2013-06-20 2022-02-25 索尼公司 显示装置
KR101792518B1 (ko) 2013-12-16 2017-11-02 엘지전자 주식회사 트릭 플레이 서비스 제공을 위한 신호 송수신 장치 및 신호 송수신 방법
JP5991502B2 (ja) * 2014-06-23 2016-09-14 パナソニックIpマネジメント株式会社 変換方法および変換装置
CN110675840B (zh) * 2014-06-26 2022-03-25 松下知识产权经营株式会社 显示装置及显示方法
MX364635B (es) * 2014-06-27 2019-05-03 Panasonic Ip Man Co Ltd Dispositivo de salida de datos, método de salida de datos y método de generación de datos.
JP2017183762A (ja) 2014-08-19 2017-10-05 パナソニックIpマネジメント株式会社 映像ストリーム生成方法、再生装置及び記録媒体
JP6134076B2 (ja) 2014-09-08 2017-05-24 ソニー株式会社 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム
JP2016081553A (ja) 2014-10-17 2016-05-16 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 記録媒体、再生方法、および再生装置
WO2016103968A1 (ja) * 2014-12-22 2016-06-30 ソニー株式会社 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム
JP6641230B2 (ja) 2015-11-24 2020-02-05 三菱電機株式会社 映像再生装置及び映像再生方法
CN106981054B (zh) 2017-03-27 2019-12-24 联想(北京)有限公司 一种图像处理方法及电子设备

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110314174A1 (en) * 2010-06-18 2011-12-22 Samsung Electronics Co., Ltd. Storage file format for multimedia streaming file, and storage method and client apparatus using the same
US20120162366A1 (en) * 2010-12-27 2012-06-28 Dolby Laboratories Licensing Corporation 3D Cameras for HDR
US20160330513A1 (en) * 2014-08-19 2016-11-10 Panasonic Intellectual Property Management Co., Ltd. Method for transmitting appropriate meta data to display device according to transmission protocol version
US20160301907A1 (en) * 2014-09-08 2016-10-13 Sony Corporation Information processing apparatus, information recording medium, information processing method, and program

Also Published As

Publication number Publication date
JPWO2019098054A1 (ja) 2020-11-26
CN111344787B (zh) 2021-12-17
CN111344787A (zh) 2020-06-26
US20210176508A1 (en) 2021-06-10
KR102624024B1 (ko) 2024-01-12
EP3712891A4 (en) 2020-12-16
US11245941B2 (en) 2022-02-08
KR20200087754A (ko) 2020-07-21
TW201929541A (zh) 2019-07-16
WO2019098054A1 (ja) 2019-05-23
JP2023018015A (ja) 2023-02-07
EP3712891B1 (en) 2023-10-11
JP2024045366A (ja) 2024-04-02
EP3712891A1 (en) 2020-09-23
JP7435704B2 (ja) 2024-02-21
JP7180610B2 (ja) 2022-11-30

Similar Documents

Publication Publication Date Title
JP6671022B2 (ja) 表示装置、表示方法及びコンピュータプログラム
CN110460792B (zh) 再现方法及再现装置
US9832440B2 (en) Reproduction device, reproduction method, and recording medium that display graphics based on tone mapping
US9706184B2 (en) Reproduction device, reproduction method, and recording medium
CN111901599A (zh) 再现装置
JP2024045366A (ja) 情報処理装置、情報処理方法、記録媒体、再生装置、再生方法、およびプログラム
KR102614338B1 (ko) 재생 장치, 재생 방법, 프로그램, 및 기록 매체
JP6928885B2 (ja) 表示装置、表示方法及びコンピュータプログラム
KR102558213B1 (ko) 재생 장치, 재생 방법, 프로그램, 및 기록 매체
JP6751893B2 (ja) 再生方法、再生装置、表示方法及び表示装置
JP2021153299A (ja) 再生装置