JPWO2016027423A1 - 伝送方法、再生方法及び再生装置 - Google Patents
伝送方法、再生方法及び再生装置 Download PDFInfo
- Publication number
- JPWO2016027423A1 JPWO2016027423A1 JP2016543801A JP2016543801A JPWO2016027423A1 JP WO2016027423 A1 JPWO2016027423 A1 JP WO2016027423A1 JP 2016543801 A JP2016543801 A JP 2016543801A JP 2016543801 A JP2016543801 A JP 2016543801A JP WO2016027423 A1 JPWO2016027423 A1 JP WO2016027423A1
- Authority
- JP
- Japan
- Prior art keywords
- hdr
- luminance
- metadata
- video signal
- conversion
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 285
- 230000005540 biological transmission Effects 0.000 title claims abstract description 72
- 238000006243 chemical reaction Methods 0.000 claims description 459
- 230000008569 process Effects 0.000 claims description 96
- 238000012545 processing Methods 0.000 claims description 89
- 230000008859 change Effects 0.000 claims description 59
- 238000012546 transfer Methods 0.000 claims description 5
- 230000003068 static effect Effects 0.000 description 126
- 238000010586 diagram Methods 0.000 description 74
- 238000005516 engineering process Methods 0.000 description 33
- 230000006870 function Effects 0.000 description 24
- 238000009826 distribution Methods 0.000 description 18
- 230000000694 effects Effects 0.000 description 18
- 238000007726 management method Methods 0.000 description 15
- 230000002411 adverse Effects 0.000 description 12
- 230000002441 reversible effect Effects 0.000 description 11
- 230000009977 dual effect Effects 0.000 description 10
- 238000003860 storage Methods 0.000 description 10
- 238000013139 quantization Methods 0.000 description 9
- 230000002829 reductive effect Effects 0.000 description 6
- 210000003127 knee Anatomy 0.000 description 5
- 230000007246 mechanism Effects 0.000 description 5
- 238000003672 processing method Methods 0.000 description 5
- 238000004590 computer program Methods 0.000 description 4
- 238000012360 testing method Methods 0.000 description 4
- 238000007792 addition Methods 0.000 description 3
- 239000000470 constituent Substances 0.000 description 3
- 238000004519 manufacturing process Methods 0.000 description 3
- 238000013507 mapping Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 230000003247 decreasing effect Effects 0.000 description 2
- 230000001771 impaired effect Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 101000997616 Mycobacterium tuberculosis (strain ATCC 25618 / H37Rv) 4-hydroxy-3-methylbut-2-enyl diphosphate reductase 1 Proteins 0.000 description 1
- 101001055850 Mycobacterium tuberculosis (strain ATCC 25618 / H37Rv) 4-hydroxy-3-methylbut-2-enyl diphosphate reductase 2 Proteins 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- FFBHFFJDDLITSX-UHFFFAOYSA-N benzyl N-[2-hydroxy-4-(3-oxomorpholin-4-yl)phenyl]carbamate Chemical compound OC1=C(NC(=O)OCC2=CC=CC=C2)C=CC(=C1)N1CCOCC1=O FFBHFFJDDLITSX-UHFFFAOYSA-N 0.000 description 1
- 230000033228 biological regulation Effects 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000001172 regenerating effect Effects 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000000153 supplemental effect Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
- H04N21/43615—Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
- H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/432—Content retrieval operation from a local storage medium, e.g. hard-disk
- H04N21/4325—Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
- H04N21/440218—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
- H04N21/44029—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display for generating different versions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
- H04N5/57—Control of contrast or brightness
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/765—Interface circuits between an apparatus for recording and another apparatus
- H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Television Signal Processing For Recording (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
Description
[1.背景]
まず、映像技術の変遷について、図1を用いて説明する。図1は、映像技術の進化について説明するための図である。
従来の画像信号より輝度範囲が高い画像信号であるHDR(High Dynamic Range)信号は、HDR信号を格納したBlu−rayディスク等のパッケージメディア、放送、又はOTT(Over The Top)等の配信媒体経由で配信される。ここで、OTTとは、インターネット上で提供されるWebサイト、動画或いは音声などのコンテンツ或いはサービス、又はそれらを提供する事業者を意味する。配信されたHDR信号は、Blu−ray機器等により復号される。また、復号されたHDR信号は、HDR対応表示装置(TV、プロジェクタ、タブレット、又はスマートフォン等)に送られ、HDR対応表示装置によりHDR映像が再生される。
図4は、SDRとHDRのホームエンターテイメント用マスターを制作するフローと、配信媒体及び表示装置の関係を示す図である。
図5は、コンテンツに格納される輝度信号のコード値の決定方法、および、再生時にコード値から輝度値を復元するプロセスの説明図である。
図6は、HDRメタデータの例を示す図である。HDRメタデータは、映像信号の輝度範囲の変更(DR変換)に用いられる変換補助情報と、HDR制御情報とを含む。各情報は、例えばタイトル単位で設けられる静的HDRメタデータと、例えばフレーム単位で設けられる動的HDRメタデータとのいずれかである。また、静的HDRメタデータは、必須メタデータ(基本データ)と、選択メタデータ(拡張データ)とのいずれかに分類され、動的HDRメタデータは、選択メタデータに分類される。なお、各情報の詳細は後述する。
HDRコンテンツにおけるマスタリング時の特性を示すパラメータとしては、タイトル毎又はプレイリスト毎に固定である静的HDRメタデータと、シーン毎に可変である動的HDRメタデータとが存在する。ここで、タイトル及びプレイリストは、連続して再生される映像信号を示す情報である。以降、連続して再生される映像信号を連続再生単位と呼ぶ。
図8は、動的HDRメタデータの、ビデオストリーム内への格納例を示す図である。MPEG−4 AVC又はHEVC(High Efficiency Video Coding)では、SEI(Supplemental Enhancement Information)と呼ばれるデータ構造を用いて、ストリームの再生制御に関わる情報を格納する。よって、例えば、SEIに動的HDRメタデータが格納される。
図9は、主映像とは別のTSストリーム形式で動的HDRメタデータを格納した例を示す図である。
図10は、静的HDRメタデータの伝送方法を示す図であり、BDプレーヤ(Blu−ray機器)又はレコーダなどの再生装置においてHDMIなどの伝送プロトコルを通じて、表示装置にHDR信号を伝送する際の動作例を示すフローチャートである。
図11は、表示装置においてHDR信号を表示する際のHDRメタデータの処理方法の例を示すフローチャートである。まず、表示装置は、HDMIの制御情報から静的HDRメタデータを取得し(S411)、取得した静的HDRメタデータに基づき、HDR信号の表示方法を決定する(S412)。
図12は、BDプレーヤなどのHDR信号を出力するデータ出力装置400の構成を示すブロック図である。データ出力装置400に入力されるHDRメタデータは、HDR信号のマスタリング特性を示す特性データと、HDR信号をSDR信号に変換する、又は、HDR信号のダイナミックレンジを変換する際のトーンマッピング方法を示す変換補助データとを含む。これら2種類のメタデータは、図7及び図8において説明したように、静的HDRメタデータ、又は、動的HDRメタデータとして格納される。さらに、静的HDRメタデータは、コンテンツの管理情報及び、映像ストリーム内の少なくとも一方に格納される。
図13は、HDRメタデータを格納するSEIメッセージのデータ構造例を示す図である。図13に示すように、HDRメタデータ専用のSEIメッセージが定義されてもよい。つまり、メタデータは、メタデータ専用のメッセージに格納されてもよい。
図14は、ユーザーデータ格納用のSEIメッセージにHDRメタデータが格納される場合のデータ構造の一例を示す図である。メッセージがHDR拡張識別情報と拡張タイプIDとを含む点以外は、図14のデータ構造と同様である。HDR拡張識別情報は、当該メッセージにHDRメタデータが含まれることを示す。拡張タイプIDは、HDRメタデータのバージョン等を示す。つまり、メタデータは、HEVCのSEIメッセージに格納され、当該SEIメッセージは、当該SEIメッセージにメタデータが含まれるか否かを示すHDR拡張識別情報を含む。
図15は、一つのユーザーデータ格納用のSEIメッセージに複数のHDRメタデータを格納する際のデータ構造の一例を示す図である。本SEIメッセージには、ダイナミックレンジ(輝度範囲)の変換に係る複数の変換モード(方式)に対する複数のHDRメタデータが格納される。
図16は、本実施の形態に係るデータ出力装置500の構成例を示すブロック図である。このデータ出力装置500は、ビデオ復号部501と、外部メタ取得部502と、HDRメタ解釈部503と、HDR制御情報生成部504と、DR変換部505と、HDMI出力部506とを備える。なお、HDRメタ解釈部503及びDR変換部505の動作が、図12に示すデータ出力装置400と異なる。つまり、ビデオ復号部501、外部メタ取得部502、HDR制御情報生成部504及びHDMI出力部506の動作は、ビデオ復号部401、外部メタ取得部402及びHDR制御情報生成部404及びHDMI出力部406の動作と同様である。
以下、DR変換部505の構成例を説明する。図17は、DR変換部505の構成例を示すブロック図である。このDR変換部505は、モード判定部511と、N個のモード処理部512と、変換結果出力部513とを備える。N個のモード処理部512は、各々がN個の変換モード(処理方式)の各々に対応し、対応する変換モードの処理を行う。モード判定部511は、HDRメタ解釈部503から指示された変換モードを取得し、変換処理を行うモード処理部512を決定する。つまり、モード判定部511は、HDRメタ解釈部503から指示された変換モードに対応するモード処理部512を選択する。決定されたモード処理部512は、HDR信号(映像信号)に変換処理を行うことでSDR信号(変換後の映像信号)を生成する。変換結果出力部513は、変換後のSDR信号を出力する。
図19及び図20は、HDRメタデータが提供される変換モードと、データ出力装置500における各モードのサポート有無、及び、表示装置510における各モードのサポート有無に基づく、HDRメタ解釈部503の指示内容の例を示す図である。HDRメタ解釈部503は、基本的には、選択可能な組合せの中で、マスター画像に対する再現性が最も高くなる動作を選択する。ここでマスター画像とは、輝度範囲を変更することなく出力した画像である。
以下、データ出力装置の別の構成例について説明する。図22は、データ出力装置500Aの構成を示すブロック図である。このデータ出力装置500Aは、図16に示すデータ出力装置500に対して、さらに、DC部507を備える。DC部507は、ビデオ復号部501で得られた映像信号の解像度をダウンコンバートする。例えば、DC部507は、映像信号が4Kの場合、当該4Kの映像信号を2Kの映像信号にダウンコンバートする。
図24は、4KのHDR信号、2KのHDR信号、及び4KのSDR信号を、次世代のBlu−ray再生装置において再生し、再生した信号を、HDR対応の4KTV、HDR非対応の4KTV、及びSDR対応の2KTVのいずれかに対して出力する際の動作モデル例を示す図である。
図25は、静的HDRメタデータ及び2つの動的HDRメタデータの格納方法の一例を示す図である。図20に示すように、本実施の形態における拡張可能なHDR方式では、(a)静的HDRメタデータと、(b)動的HDRメタデータ用クリップ(動的HDRメタデータ)と、(c)動的HDRメタデータとの3つが用いられる。
図25で示した、3つのメタデータ(a)〜(c)の使い方の例をBlu−rayの場合を例に詳細に説明する。
図26は、HDRからSDRへの変換処理を実行するBlu−ray機器でのユーザーガイダンス表示方法を示す図である。
図27は、ディスク内に格納されたHDRからSDRへの変換処理実行時のユーザーガイダンスの表示方法を示す図である。
図28は、ディスク内に格納されたHDRからSDRへの変換処理実行時のユーザーガイダンスメニューの表示方法を示す図である。
図29は、ディスク内に格納されたHDRからSDRへの変換処理実行時の処理方法を選択可能なユーザーガイダンスメニューの表示方法を示す図である。
なお、放送においても同様のメッセージを表示することができる。例えば、HDR信号に対応していないTV又は再生装置は、データ放送のアプリケーションなどを用いて、放送番組がHDR信号であり、で視聴した場合には正しく表示できないことがある旨を示すメッセージを表示する。また、HDR信号に対応したTV又は再生装置は、当該メッセージを表示しなくてもよい。また、メッセージの属性を示すタグ値などにより、当該メッセージがHDR信号に対する警告メッセージであることが示される。HDR信号に対応したTV又は再生装置は、タグ値を参照してメッセージの表示が不要であることを判定する。
例えば、動的HDRメタデータ、又は静的HDRメタデータは、HDMIなどで伝送可能なデータ構造である。ここで、HDMIなどの伝送プロトコルの仕様又はバージョンによって、当該伝送プロトコルによりHDRメタデータを表示装置に伝送可能であるかが決まる。
これまで、HDR信号を忠実に再現するためのHDRメタデータの扱い方、及び、再生装置におけるHDRからSDRへの変換などについて説明した。しかしながら、HDR信号は従来のSDR信号よりも大幅に高いピーク輝度を有するため、再生装置は、TV等の表示装置におけるパネル或いは信号処理回路の性能、又は、人体への影響などを考慮して、映像のピーク輝度を制御してもよい。なお、以下で述べる処理(再生方法)は、Blu−ray機器等の再生装置で行われてもよいし、TV等の表示装置で行われてもよい。言い換えると、以下で述べる再生装置とは映像を再生する機能を有すればよく、上述した再生装置(Blu−ray機器等)と表示装置(TV等)とを含む。
以下、ビデオストリーム内での静的HDRメタデータと動的HDRメタデータの配置方法について説明する。
以上では、HDR信号のみが格納されたHDRディスクの再生動作について説明した。
4K対応BDまたはHDR対応BDを再生するBlu−ray機器は、2K_SDR対応TV、2K_HDR対応TV、4K_SDR対応TV、及び、4K_HDR対応TVの4つのTVに対応する必要がある。具体的には、Blu−ray機器は、3組のHDMI/HDCP規格(HDMI1.4/HDCP1.4、HDMI2.0/HDCP2.1、HDMI2.1/HDCP2.2)をサポートする必要がある。
次に、疑似HDRの必要性について図34A〜図34Cを用いて説明する。
通常のSDRTVは入力信号が100nitであるが、視聴環境(暗い室:シネマモード、明るい部屋:ダイナミックモード等)に合わせて200nit以上の映像表現が可能な能力を持つ。しかし、SDRTVへの入力信号の輝度上限が100nitに決められていたため、その能力を直接つかうことはできなかった。
放送、Blu−ray等のパッケージメディア、OTT等のインターネット配信により送られてきたHDR信号を、HDR−疑似HDR変換処理を行うことで、疑似HDR信号に変換する。これにより、HDR信号を疑似HDR映像として既存のSDRTVで表示することが可能となる。
ここで、EOTFについて、図36Aおよび図36Bを用いて説明する。
図37は、実施の形態の変換装置および表示装置の構成を示すブロック図である。図38は、実施の形態の変換装置および表示装置により行われる変換方法および表示方法を示すフローチャートである。
変換装置100が行う変換方法について、図38を用いて説明する。なお、変換方法は、以下で説明するステップS101〜ステップS104を含む。
次に、ステップS102の第1輝度変換(HPL→DPL)の詳細について、図39Aを用いて説明する。図39Aは、第1輝度変換の一例について説明するための図である。
次に、ステップS103の第2輝度変換(DPL→100〔nit〕)の詳細について、図40を用いて説明する。図40は、第2輝度変換について説明するための図である。
次に、ステップS107の第3輝度変換(100→DPL〔nit〕)の詳細について、図41を用いて説明する。図41は、第3輝度変換について説明するための図である。
次に、ステップS105の表示設定の詳細について、図42を用いて説明する。図42は、表示設定の詳細な処理を示すフローチャートである。
以上のように、本出願において開示する技術の例示として、実施の形態を説明した。しかしながら、本開示における技術は、これに限定されず、適宜、変更、置き換え、付加、省略などを行った実施の形態1にも適用可能である。また、上記実施の形態で説明した各構成要素を組み合わせて、新たな実施の形態とすることも可能である。
また、変換装置100の第1輝度変換(HPL→DPL)は例えば次の算式で変換する。
S2 = 2000/10000
M = 750/10000
a = 0.023
b = S1 − a*ln(S1) = 0.112105
つまり、第1輝度変換では、SDRの輝度値が、平均輝度値(CAL)と第1最大輝度値(CPL)との間である場合、自然対数を用いて、当該HDRの輝度値に対応するディスプレイ輝度値を決定する。
HDR映像のコンテンツピーク輝度やコンテンツ平均輝度等の情報を用いてHDR映像を変換することにより、コンテンツに応じて変換式を変えることができ、HDRの階調をなるべく保つように変換することが可能となる。また、暗すぎる、明るすぎるといった悪影響を抑制することができる。具体的には、HDR映像のコンテンツピーク輝度をディスプレイピーク輝度にマッピングすることにより、階調をなるべく保つようにしている。また、平均輝度付近以下の画素値を変えないことにより、全体的な明るさが変わらないようにしている。
以上、本開示の一つまたは複数の態様に係る再生方法および再生装置について、実施の形態に基づいて説明したが、本開示は、この実施の形態に限定されるものではない。本開示の趣旨を逸脱しない限り、当業者が思いつく各種変形を本実施の形態に施したもの、異なる実施の形態における構成要素を組み合わせて構築される形態なども、本開示の一つまたは複数の態様の範囲内に含まれてもよい。
101 EOTF変換部
102 輝度変換部
103 逆輝度変換部
104 逆SDRのEOTF変換部
200,510 表示装置
201 表示設定部
202 SDRのEOTF変換部
203 輝度変換部
204 表示部
400,500,500A データ出力装置
401,501 ビデオ復号部
402,502 外部メタ取得部
403,503 HDRメタ解釈部
404,504 HDR制御情報生成部
405,505,505A DR変換部
406,506 HDMI出力部
507 DC部
Claims (19)
- 表示装置に映像信号を伝送する再生装置における伝送方法であって、
前記再生装置と前記表示装置とを接続する伝送プロトコルのバージョンが第1バージョンである場合、前記映像信号の連続再生単位に含まれる複数の画像に対して共通に用いられ、前記映像信号の輝度範囲に関する情報である第1メタデータを前記表示装置に伝送し、前記映像信号の前記連続再生単位より細かい単位に対して共通に用いられ、前記映像信号の輝度範囲に関する情報である第2メタデータを前記表示装置に伝送せず、
前記伝送プロトコルのバージョンが第2バージョンである場合、前記第1メタデータ及び前記第2メタデータを前記表示装置へ伝送する
伝送方法。 - 前記伝送プロトコルのバージョンが前記第1バージョンである場合、前記第2メタデータを用いて前記映像信号の輝度範囲を変換する変換処理を行い、変換後の映像信号を前記表示装置に伝送する
請求項1記載の伝送方法。 - 前記伝送プロトコルのバージョンが前記第2のバージョンであり、かつ、前記表示装置が前記変換処理に対応していない場合、前記変換処理を行い、前記変換後の映像信号を前記表示装置に伝送し、
前記伝送プロトコルのバージョンが前記第2のバージョンであり、かつ、前記表示装置が前記変換処理に対応している場合、前記変換処理を行わずに前記映像信号を前記表示装置に伝送する
請求項2記載の伝送方法。 - 前記再生装置が、前記第2メタデータを用いて前記映像信号の輝度範囲を変換する変換処理に対応していない場合、前記変換処理を行わず、前記第2メタデータを前記表示装置へ伝送しない
請求項1記載の伝送方法。 - 前記映像信号における輝度値は、コード値として符号化されており、
前記第1メタデータは、複数の輝度値と複数のコード値とを関係付けたEOTF(Electro−Optical Transfer Function)を特定するための情報である
請求項1〜4のいずれか1項に記載の伝送方法。 - 前記第2メタデータは、前記映像信号のマスタリング特性を示す
請求項1〜5のいずれか1項に記載の伝送方法。 - 映像信号を再生する再生方法であって、
前記映像信号の輝度は、最大輝度値が100nitを超える第1最大輝度値に定義された第1輝度範囲における第1輝度値からなり、
前記映像信号における画面間の輝度値の変化量が予め定められた第1閾値を超えるかを判定する判定ステップと、
前記変化量が前記第1閾値を超えると判定された場合、前記映像信号の輝度値を下げる調整処理を行う調整ステップとを含む
再生方法。 - 前記調整ステップでは、前記変化量が前記第1閾値を超える画素に対して、当該画素の前記変化量が前記第1閾値以下になるように当該画素の輝度値を調整する
請求項7記載の再生方法。 - 前記判定ステップでは、前記映像信号に含まれる第1画像のピーク輝度と、前記映像信号に含まれる、前記第1画像より後の第2画像に含まれる複数の画素の輝度値の各々との差分が前記第1閾値を超えるかを判定し、
前記調整ステップでは、前記差分が前記第1閾値を超える画素に対して、当該画素の前記差分が前記第1閾値以下になるように当該画素の輝度値を調整する
請求項7記載の再生方法。 - 前記判定ステップでは、前記映像信号のフレームレートの逆数の整数倍である基準時間間隔における前記輝度値の前記変化量が前記第1閾値を超えるかを判定する
請求項7記載の再生方法。 - 前記判定ステップでは、前記映像信号に含まれる画像に含まれる複数の画素のうち、前記変化量が前記第1閾値を超える画素の割合が第2閾値を超えるかを判定し、
前記調整ステップでは、前記割合が前記第2閾値を超える場合、前記割合が前記第2閾値以下になるように前記複数の画素の輝度値を調整する
請求項7記載の再生方法。 - 前記判定ステップでは、画面が分割されることで得られた複数の領域毎に、当該領域の画面間の輝度値の変化量が前記第1閾値を超えるかを判定し、
前記調整ステップでは、前記変化量が前記第1閾値を超えると判定された領域に対して、当該領域の輝度値を下げる調整処理を行う
請求項7記載の再生方法。 - 映像信号を再生する再生方法であって、
前記映像信号の輝度は、最大輝度値が100nitを超える第1最大輝度値に定義された第1輝度範囲における第1輝度値からなり、
前記映像信号に含まれる画像の輝度値が予め定められた第1閾値を超えるかを判定する判定ステップと、
前記輝度値が前記第1閾値を超えると判定された場合、前記画像の輝度値を下げる調整処理を行う調整ステップとを含む
再生方法。 - 前記判定ステップでは、前記画像に含まれる複数の画素のうち、輝度値が前記第1閾値を超える画素の数を判定し、
前記調整ステップでは、前記画素の数が第3閾値を超える場合、前記画素の数が前記第3閾値以下になるように、前記画像の輝度値を下げる
請求項13記載の再生方法。 - 前記判定ステップでは、前記画像に含まれる複数の画素のうち、輝度値が前記第1閾値を超える画素の割合を判定し、
前記調整ステップでは、前記割合が第3閾値を超える場合、前記割合が前記第3閾値以下になるように、前記画像の輝度値を下げる
請求項13記載の再生方法。 - 前記第1閾値は、前記映像信号を表示する表示装置において複数の画素に対して同時に印加できる電圧の上限値に基づいて算出される値である
請求項7又は13記載の再生方法。 - 表示装置に映像信号を伝送する再生装置であって、
前記再生装置と前記表示装置とを接続する伝送プロトコルのバージョンが第1バージョンである場合、前記映像信号の連続再生単位に含まれる複数の画像に対して共通に用いられ、前記映像信号の輝度範囲に関する情報である第1メタデータを前記表示装置に伝送し、前記映像信号の前記連続再生単位より細かい単位に対して共通に用いられ、前記映像信号の輝度範囲に関する情報である第2メタデータを前記表示装置に伝送せず、
前記伝送プロトコルのバージョンが第2バージョンである場合、前記第1メタデータ及び前記第2メタデータを前記表示装置へ伝送する
再生装置。 - 映像信号を再生する再生装置であって、
前記映像信号の輝度は、最大輝度値が100nitを超える第1最大輝度値に定義された第1輝度範囲における第1輝度値からなり、
前記映像信号における画面間の輝度値の変化量が予め定められた第1閾値を超えるかを判定する判定部と、
前記変化量が前記第1閾値を超えると判定された場合、前記映像信号の輝度値を下げる調整処理を行う調整部とを備える
再生装置。 - 映像信号を再生する再生装置であって、
前記映像信号の輝度は、最大輝度値が100nitを超える第1最大輝度値に定義された第1輝度範囲における第1輝度値からなり、
前記映像信号に含まれる画像の輝度値が予め定められた第1閾値を超えるかを判定する判定部と、
前記輝度値が前記第1閾値を超えると判定された場合、前記画像の輝度値を下げる調整処理を行う調整部とを備える
再生装置。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201462038900P | 2014-08-19 | 2014-08-19 | |
US62/038,900 | 2014-08-19 | ||
JP2015134733 | 2015-07-03 | ||
JP2015134733 | 2015-07-03 | ||
PCT/JP2015/003876 WO2016027423A1 (ja) | 2014-08-19 | 2015-07-31 | 伝送方法、再生方法及び再生装置 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019090723A Division JP6751893B2 (ja) | 2014-08-19 | 2019-05-13 | 再生方法、再生装置、表示方法及び表示装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2016027423A1 true JPWO2016027423A1 (ja) | 2017-06-01 |
JP6566271B2 JP6566271B2 (ja) | 2019-08-28 |
Family
ID=55350392
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016543801A Active JP6566271B2 (ja) | 2014-08-19 | 2015-07-31 | 伝送方法及び再生装置 |
Country Status (6)
Country | Link |
---|---|
US (2) | US10291955B2 (ja) |
EP (1) | EP3185572B1 (ja) |
JP (1) | JP6566271B2 (ja) |
CN (2) | CN105981396B (ja) |
MX (1) | MX366637B (ja) |
WO (1) | WO2016027423A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10873684B2 (en) | 2017-07-14 | 2020-12-22 | Panasonic Intellectual Property Management Co., Ltd. | Video display apparatus and video display method |
Families Citing this family (35)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110460745B (zh) * | 2014-06-10 | 2022-03-08 | 松下知识产权经营株式会社 | 显示装置 |
EP3196880B1 (en) * | 2014-09-12 | 2019-08-28 | Sony Corporation | Playback device, playback method, information processing device, information processing method, program, and recording medium |
JP6863271B2 (ja) * | 2015-02-16 | 2021-04-21 | ソニーグループ株式会社 | 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム |
US10735755B2 (en) * | 2015-04-21 | 2020-08-04 | Arris Enterprises Llc | Adaptive perceptual mapping and signaling for video coding |
JP6535560B2 (ja) * | 2015-09-18 | 2019-06-26 | 東芝映像ソリューション株式会社 | 電子機器、及び表示方法 |
EP3185571A1 (en) * | 2015-12-22 | 2017-06-28 | Thomson Licensing | Hierarchical scene segmentation metadata transmission for content enhancement |
KR102438199B1 (ko) * | 2015-12-24 | 2022-08-30 | 삼성전자주식회사 | 디스플레이 장치 및 디스플레이 장치의 설정 값을 변경하는 방법 |
JP2017139678A (ja) * | 2016-02-05 | 2017-08-10 | Necプラットフォームズ株式会社 | 画像データ変換装置、画像データ変換方法、画像データ変換用プログラム、pos端末装置、及びサーバ |
JP2017151308A (ja) * | 2016-02-25 | 2017-08-31 | キヤノン株式会社 | 情報処理装置および情報処理方法 |
JP6253036B2 (ja) * | 2016-03-31 | 2017-12-27 | シャープ株式会社 | コンテンツ処理装置、テレビジョン受信装置、コンテンツ処理装置における情報処理方法、プログラム |
WO2018003757A1 (ja) * | 2016-06-27 | 2018-01-04 | ソニー株式会社 | 信号処理装置、信号処理方法、カメラシステム、ビデオシステムおよびサーバ |
WO2018003667A1 (ja) * | 2016-06-28 | 2018-01-04 | シャープ株式会社 | 送信装置、受信装置、および表示装置 |
JP6786324B2 (ja) * | 2016-09-20 | 2020-11-18 | 株式会社東芝 | 多重化装置及び多重化方法 |
JP6855205B2 (ja) | 2016-10-06 | 2021-04-07 | 株式会社ソニー・インタラクティブエンタテインメント | 情報処理装置および画像処理方法 |
KR102554379B1 (ko) * | 2016-10-31 | 2023-07-11 | 엘지디스플레이 주식회사 | 하이 다이나믹 레인지 영상 처리 방법 및 영상 처리 모듈과 그를 이용한 표시 장치 |
CN109644289B (zh) * | 2017-04-21 | 2021-11-09 | 松下知识产权经营株式会社 | 再现装置、再现方法、显示装置、以及显示方法 |
CN109691116B (zh) * | 2017-06-21 | 2022-04-19 | 松下知识产权经营株式会社 | 影像显示装置及影像显示方法 |
WO2019008819A1 (ja) * | 2017-07-07 | 2019-01-10 | パナソニックIpマネジメント株式会社 | 映像表示装置及び映像表示方法 |
JP6697755B2 (ja) * | 2017-09-13 | 2020-05-27 | パナソニックIpマネジメント株式会社 | 映像表示装置及び映像表示方法 |
JP7207314B2 (ja) * | 2017-09-21 | 2023-01-18 | ソニーグループ株式会社 | 再生装置、再生方法、プログラム |
US11146737B2 (en) | 2017-10-06 | 2021-10-12 | Panasonic Intellectual Property Management Co., Ltd. | Video display system and video display method |
US10972767B2 (en) * | 2017-11-01 | 2021-04-06 | Realtek Semiconductor Corp. | Device and method of handling multiple formats of a video sequence |
KR102413839B1 (ko) * | 2017-11-15 | 2022-06-28 | 삼성전자 주식회사 | 컨텐츠 제공장치, 그 제어방법 및 기록매체 |
KR102624024B1 (ko) | 2017-11-17 | 2024-01-12 | 소니그룹주식회사 | 정보 처리 장치, 정보 처리 방법, 기록 매체, 재생 장치, 재생 방법, 및 프로그램 |
JP6821269B2 (ja) * | 2017-12-05 | 2021-01-27 | 株式会社ソニー・インタラクティブエンタテインメント | 画像処理装置および画像処理方法 |
US10645199B2 (en) * | 2018-01-22 | 2020-05-05 | Lattice Semiconductor Corporation | Multimedia communication bridge |
US10832613B2 (en) | 2018-03-07 | 2020-11-10 | At&T Intellectual Property I, L.P. | Image format conversion using luminance-adaptive dithering |
CN108447083B (zh) * | 2018-03-16 | 2020-06-02 | 北京虚拟映画科技有限公司 | 基于图像分解再组合的影像传输方法及系统 |
TWI822677B (zh) * | 2018-04-30 | 2023-11-21 | 圓剛科技股份有限公司 | 影像訊號轉換裝置 |
TW201946430A (zh) * | 2018-04-30 | 2019-12-01 | 圓剛科技股份有限公司 | 影像訊號轉換裝置及方法 |
KR102572432B1 (ko) * | 2018-07-03 | 2023-08-30 | 삼성전자주식회사 | 디스플레이장치 및 그 제어방법과 기록매체 |
US10652512B1 (en) * | 2018-11-20 | 2020-05-12 | Qualcomm Incorporated | Enhancement of high dynamic range content |
KR20210065447A (ko) * | 2019-11-27 | 2021-06-04 | 삼성전자주식회사 | 전자장치와 그의 제어방법, 및 기록매체 |
CN112261334B (zh) * | 2020-10-21 | 2023-04-11 | 广东博华超高清创新中心有限公司 | 一种支持hdmi 2.1信号单路输入多路输出的传输方法和系统 |
US20230031245A1 (en) * | 2021-07-23 | 2023-02-02 | Teradici Co. | Encoder changes |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011172146A (ja) * | 2010-02-22 | 2011-09-01 | Sharp Corp | コンテンツ再生装置、設定方法、プログラム、及び、記録媒体 |
JP2012520050A (ja) * | 2009-03-10 | 2012-08-30 | ドルビー ラボラトリーズ ライセンシング コーポレイション | 拡張ダイナミックレンジおよび拡張次元をもつ画像信号変換 |
WO2012172460A1 (en) * | 2011-06-14 | 2012-12-20 | Koninklijke Philips Electronics N.V. | Graphics processing for high dynamic range video |
Family Cites Families (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3847006B2 (ja) * | 1998-08-26 | 2006-11-15 | 富士通株式会社 | 画像表示制御装置及び記録媒体 |
JP2002116732A (ja) * | 2000-10-05 | 2002-04-19 | Pioneer Electronic Corp | 自発光パネル駆動方法及び装置 |
JP2006154756A (ja) * | 2004-11-02 | 2006-06-15 | Fujitsu Ten Ltd | 映像信号処理方法、映像信号処理装置、及び、表示装置 |
JP4177826B2 (ja) * | 2005-03-23 | 2008-11-05 | 株式会社東芝 | 画像処理装置および画像処理方法 |
JP4812008B2 (ja) | 2006-04-07 | 2011-11-09 | 三菱電機株式会社 | 画像表示装置 |
JP4210863B2 (ja) * | 2006-07-06 | 2009-01-21 | セイコーエプソン株式会社 | 画像処理システム、表示装置、プログラムおよび情報記憶媒体 |
JP5227502B2 (ja) * | 2006-09-15 | 2013-07-03 | 株式会社半導体エネルギー研究所 | 液晶表示装置の駆動方法、液晶表示装置及び電子機器 |
US7826671B2 (en) * | 2006-11-21 | 2010-11-02 | Samsung Electronics Co., Ltd. | Method and system for quantization layer reduction in digital image processing |
JP5145017B2 (ja) | 2006-12-05 | 2013-02-13 | 日本放送協会 | 画像信号処理装置 |
JP2010010915A (ja) * | 2008-06-25 | 2010-01-14 | Sony Corp | 画像処理装置および方法、並びにプログラム |
CN101710955B (zh) * | 2009-11-24 | 2014-06-25 | 北京中星微电子有限公司 | 亮度和对比度调整的方法及设备 |
WO2011083609A1 (ja) * | 2010-01-08 | 2011-07-14 | シャープ株式会社 | 光センサ付き表示装置 |
JP5665388B2 (ja) * | 2010-06-28 | 2015-02-04 | キヤノン株式会社 | 画像処理装置及びその制御方法 |
JP5134658B2 (ja) * | 2010-07-30 | 2013-01-30 | 株式会社東芝 | 画像表示装置 |
US8525933B2 (en) * | 2010-08-02 | 2013-09-03 | Dolby Laboratories Licensing Corporation | System and method of creating or approving multiple video streams |
US8736674B2 (en) * | 2010-09-23 | 2014-05-27 | Dolby Laboratories Licensing Corporation | Method and system for 3D display calibration with feedback determined by a camera device |
WO2012170898A2 (en) * | 2011-06-09 | 2012-12-13 | Utah State University Research Foundation | Systems and methods for sensing occupancy |
WO2012176783A1 (ja) * | 2011-06-21 | 2012-12-27 | 浜松ホトニクス株式会社 | 光測定装置、光測定方法、及び光測定プログラム |
US9451292B2 (en) * | 2011-09-15 | 2016-09-20 | Dolby Laboratories Licensing Corporation | Method and system for backward compatible, extended dynamic range encoding of video |
EP2745507A1 (en) * | 2011-09-27 | 2014-06-25 | Koninklijke Philips N.V. | Apparatus and method for dynamic range transforming of images |
WO2013070932A1 (en) * | 2011-11-08 | 2013-05-16 | Rambus Inc. | Conditional-reset, temporally oversampled image sensor |
WO2013125404A1 (ja) * | 2012-02-23 | 2013-08-29 | 日産自動車株式会社 | 立体物検出装置 |
BR112014020353B1 (pt) * | 2012-03-02 | 2021-08-31 | Nissan Motor Co., Ltd | Dispositivo de detecção de objeto tridimensional |
EP2896198B1 (en) * | 2012-09-12 | 2016-11-09 | Dolby Laboratories Licensing Corporation | Display management for images with enhanced dynamic range |
US9681026B2 (en) * | 2013-04-15 | 2017-06-13 | Htc Corporation | System and method for lens shading compensation |
US9693078B2 (en) * | 2014-07-09 | 2017-06-27 | Interra Systems, Inc. | Methods and systems for detecting block errors in a video |
-
2015
- 2015-07-31 CN CN201580007932.1A patent/CN105981396B/zh active Active
- 2015-07-31 MX MX2017000432A patent/MX366637B/es active IP Right Grant
- 2015-07-31 JP JP2016543801A patent/JP6566271B2/ja active Active
- 2015-07-31 WO PCT/JP2015/003876 patent/WO2016027423A1/ja active Application Filing
- 2015-07-31 EP EP15834222.0A patent/EP3185572B1/en active Active
- 2015-07-31 CN CN201910885200.2A patent/CN110460792B/zh active Active
-
2016
- 2016-07-20 US US15/214,507 patent/US10291955B2/en active Active
-
2019
- 2019-04-01 US US16/371,607 patent/US20190230407A1/en not_active Abandoned
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012520050A (ja) * | 2009-03-10 | 2012-08-30 | ドルビー ラボラトリーズ ライセンシング コーポレイション | 拡張ダイナミックレンジおよび拡張次元をもつ画像信号変換 |
JP2011172146A (ja) * | 2010-02-22 | 2011-09-01 | Sharp Corp | コンテンツ再生装置、設定方法、プログラム、及び、記録媒体 |
WO2012172460A1 (en) * | 2011-06-14 | 2012-12-20 | Koninklijke Philips Electronics N.V. | Graphics processing for high dynamic range video |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10873684B2 (en) | 2017-07-14 | 2020-12-22 | Panasonic Intellectual Property Management Co., Ltd. | Video display apparatus and video display method |
Also Published As
Publication number | Publication date |
---|---|
US10291955B2 (en) | 2019-05-14 |
MX2017000432A (es) | 2017-05-01 |
US20190230407A1 (en) | 2019-07-25 |
CN105981396B (zh) | 2020-07-14 |
CN110460792A (zh) | 2019-11-15 |
EP3185572A4 (en) | 2018-06-06 |
US20160330513A1 (en) | 2016-11-10 |
EP3185572B1 (en) | 2023-03-08 |
CN105981396A (zh) | 2016-09-28 |
JP6566271B2 (ja) | 2019-08-28 |
MX366637B (es) | 2019-07-17 |
CN110460792B (zh) | 2022-03-08 |
EP3185572A1 (en) | 2017-06-28 |
WO2016027423A1 (ja) | 2016-02-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6566271B2 (ja) | 伝送方法及び再生装置 | |
JP6671022B2 (ja) | 表示装置、表示方法及びコンピュータプログラム | |
JP6566320B2 (ja) | データ出力装置及びデータ出力方法 | |
JP6573238B2 (ja) | 表示装置、変換装置、表示方法、および、コンピュータプログラム | |
WO2015198552A1 (ja) | コンテンツデータ生成方法、映像ストリーム伝送方法及び映像表示方法 | |
JP7170236B2 (ja) | 再生装置 | |
JP6928885B2 (ja) | 表示装置、表示方法及びコンピュータプログラム | |
JP2017139511A (ja) | コンテンツデータ生成方法、映像ストリーム伝送方法及び映像表示方法 | |
JP6751893B2 (ja) | 再生方法、再生装置、表示方法及び表示装置 | |
JP6643669B2 (ja) | 表示装置および表示方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180625 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190319 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190513 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190625 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190717 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6566271 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |