CN109417647A - 影像信号处理装置、影像信号处理方法及程序 - Google Patents

影像信号处理装置、影像信号处理方法及程序 Download PDF

Info

Publication number
CN109417647A
CN109417647A CN201780038350.9A CN201780038350A CN109417647A CN 109417647 A CN109417647 A CN 109417647A CN 201780038350 A CN201780038350 A CN 201780038350A CN 109417647 A CN109417647 A CN 109417647A
Authority
CN
China
Prior art keywords
signal information
optical signal
input picture
image
conversion process
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201780038350.9A
Other languages
English (en)
Inventor
近藤哲二郎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
I< Sup> 3< \/sup> Institute Of Ltd By Share Ltd
I<sup>3</sup>
I Cubed Research Center Inc
Original Assignee
I< Sup> 3< \/sup> Institute Of Ltd By Share Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by I< Sup> 3< \/sup> Institute Of Ltd By Share Ltd filed Critical I< Sup> 3< \/sup> Institute Of Ltd By Share Ltd
Publication of CN109417647A publication Critical patent/CN109417647A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/76Circuitry for compensating brightness variation in the scene by influencing the image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Picture Signal Circuits (AREA)
  • Studio Devices (AREA)

Abstract

本发明的课题在于以往未进行对自然界的光的行为运作加以考虑的影像信号处理。本发明的解决手段,藉由具备有下述各部的影像信号处理装置来实现对自然界的光的行为运作加以考虑的影像信号处理,所述影像信号处理装置具备:存储部,存储显示光信号信息与电信号信息对应关系的对应信息,所述光信号信息是关于在取得图像的环境中的光信号,且所述电信号信息是关于在取得图像的环境中的电信号;输入图像接收部,接收输入图像;光信号信息取得部,利用对应信息来取得对应于从输入图像中取得的电信号信息的光信号信息;转换处理部,利用光信号信息取得部所取得的光信号信息,进行从输入图像中取得输出图像的转换处理;以及输出部,将输出图像输出。

Description

影像信号处理装置、影像信号处理方法及程序
技术领域
本发明是关于一种进行影像的信号处理的影像信号处理装置等。
背景技术
现有的影像信号处理装置能够在不增加存储影像信号的存储器的尺寸的情况下,避免存储于存储器中的相同像素数据因多种处理而导致的同时读取的问题(例如,参阅专利文献1)。
现有技术文献
专利文献
专利文献1:日本特开2014-150308号公报
发明内容
发明所欲解决的课题
然而,先前技术中,并未执行考虑到自然界的光的行为运作的影像信号处理。在这样的处理的情况下,实施影像信号处理的结果会造成下述问题:会有导致不可能存在自然界中光照射在被摄体的影像的问题。再者,自然界的光的行为运作,例如是指“吸收”、“穿透”、“反射”、“散射”等的照射到物质的情况的行为运作。此外,自然界的光的行为运作,例如是指“折射”、“绕射”等在介质中传递时的光的行为运作。
解决课题的技术方案
本第一发明的影像信号处理装置具备:存储部,存储显示光信号信息与电信号信息对应关系的对应信息,所述光信号信息是关于在取得图像的环境中的光信号,且所述电信号信息是关于在取得图像的环境中的电信号;输入图像接收部,接收输入图像;光信号信息取得部,取得对应于电信号信息的光信号信息;转换处理部,利用光信号信息取得部所取得的光信号信息,进行从输入图像中取得输出图像的转换处理;以及输出部,输出转换处理部取得的输出图像。
根据这种构成,能够实现考虑自然界的光的行为运作的影像信号处理。
此外,本第二发明的影像信号处理装置相对于第一发明,对应信息是具有2个以上对应记录的查找表,所述对应记录显示光信号信息与电信号信息的对应关系,光信号信息取得部选择与从输入图像接收部所接收的输入图像中取得的电信号信息一致或者最接近的电信号信息对应的对应记录,并取得对应于该选择的对应记录的光信号信息。
根据这种构成,能够实现考虑自然界的光的行为运作的影像信号处理。
此外,本第三发明的影像信号处理装置相对于第一发明,对应信息具有作为演算式的电信号信息,所述演算式与电信号信息对应且使抽头于时间空间扩展,光信号信息取得部取得与从输入图像接收部所接收的输入图像中取得的电信号信息对应的演算式,转换处理部利用光信号信息取得部取得的演算式,来转换输入图像,进行取得输出图像的转换处理。
根据这种构成,能够实现考虑自然界的光的行为运作的影像信号处理。
此外,本第四发明的影像信号处理装置相对于第一发明,对应信息为具有2个以上的对应记录的查找表,所述对应记录显示电信号信息与辨识处理的处理辨识码的对应关系,光信号信息取得部选择与从输入图像接收部接收到的输入图像中取得的电信号信息一致或者最接近的电信号信息对应的对应记录,并取得作为与所选择的对应记录对应的处理辨识码的光信号信息,转换处理部执行藉由光信号信息取得部所取得的处理辨识码所辨识的处理,进行从输入图像中取得输出图像的转换处理。
根据这种构成,能够实现考虑自然界的光的行为运作的影像信号处理。
此外,本第五发明的影像信号处理装置相对于第一至第四任一者的发明,转换处理部利用光信号信息取得部所取得的光信号信息,来进行将输入图像转换为更高画质的图像的高画质化处理,并取得输出图像。
根据这种构成,能够实现考虑自然界的光的行为运作的影像信号的高画质化处理。
此外,本第六发明的影像信号处理装置相对于第一至第四任一者的发明,转换处理部利用光信号信息取得部所取得的光信号信息,进行将输入图像转换为更高分辨率的图像的高分辨率化处理,并取得输出图像。
根据这种构成,能够实现考虑自然界的光的行为运作的影像信号的高分辨率化处理。
此外,本第七发明的影像信号处理装置相对于第一至第四任一者的发明,转换处理部利用光信号信息取得部所取得的光信号信息,对输入图像进行噪声去除处理,并取得输出图像。
根据这种构成,能够实现考虑自然界的光的行为运作的影像信号的噪声去除处理。
此外,本第八发明的影像信号处理装置相对于第一至第四任一者的发明,电信号信息为显示电信号的信号范围的范围信息,转换处理部对输入图像,进行第一转换处理取得输出图像的候选,判断输出图像的候选的信号强度是否落入在范围信息的显示范围内,在判断输出图像的候选的信号强度没有落入在范围信息的显示范围内的情况下,将输入图像进行再量子化,转换输入图像以使信号强度落入在范围信息的显示范围内,并取得输出图像。
根据这种构成,能够得到考虑自然界的光的行为运作的信号强度的输出图像。
此外,本第九发明的影像信号处理装置相对于第一至第八任一者的发明,进一步具备:用户指令接收部,接收变更光信号信息的光信号信息变更指令;以及光信号信息变更部,依照光信号信息变更指令,来变更所存储的光信号信息,转换处理部利用藉由光信号信息变更指令所变更的光信号信息来取得输出图像。
根据这种构成,能够得到反应用户的想法的输出图像。
发明效果
根据本发明的影像信号处理装置,能够实现考虑自然界的光的行为运作的影像信号处理。
附图说明
图1为实施方式1中的影像信号处理1的方块图。
图2为说明该影像信号处理装置1的运作流程。
图3为显示该输入图像的信号准位的频率分布图。
图4为显示该输出图像的候选的信号准位的频率分布。
图5为显示该输出图像的信号准位的频率分布。
图6为该计算机系统的示意图。
图7为该计算机系统的方块图。
具体实施方式
以下,参照附图说明影像信号处理装置等的实施方式。再者,因为实施方式中标有相同符号的组成组件进行相同的动作,因而有省略重复说明的情况。
(实施方式1)
本实施方式中,说明影像信号处理装置其考虑自然界的光的行为运作,以进行将输入影像信号转换为输出影像信号的影像信号处理。
更具体地,本实施方式中,说明影像信号处理装置将接收到的输入图像适用于显示后述光信号信息及后述电信号信息的对应关系的对应信息,利用由此所得的光信号输出来转换处理输入图像,进而取得输出图像。
图1为本实施方式中的影像信号处理装置1的方块图。
影像信号处理装置1具备存储部11、接收部12、处理部13以及输出部14。
接收部12具备输入图像接收部121以及用户指令接收部122。
处理部13具备光信号信息取得部131、转换处理部132以及光信号信息变更部133。
影像信号处理装置1例如为电视收讯器、Blu-ray(注册商标)记录器及DVD(注册商标)记录器等的影像输出装置、摄像机以及相片输出装置等,只要是处理影像信号的装置皆可。再者,影像通常是2个以上的静止图像的集合的动画,也可为1个的静止图像。
存储部11能够存储各种的信息。各种的信息例如是指对应信息。所谓各种的信息例如为具有1个或2个以上的光信号信息的光信号数据库以及具有1个或2个以上的电信号信息的电信号数据库。此外,所谓各种的信息例如是指执行与后述的处理辨识码赋予对应关系的处理的程序。
此外,对应信息为显示光信号信息与电信号信息的对应关系的信息。对应信息是:为了一边限制输出图像所发出的光不要有自然界的光所不可能发生的行为运作并一边转换图像所利用的信息。对应信息例如为用于取得对应于光的变化量的适当的电信号变化量的信息。显示光信号信息及电信号信息的对应关系的对应信息,也可为电信号信息。
光信号信息是指关于取得图像的环境(通常,为自然界的环境)中的光信号的信息。光信号信息例如为显示光信号的特性的信息(也可称为光信号特性)。光信号信息例如为显示具有无限分辨率的信息、显示信号强度幅度的信号范围中无上限或下限的信息。光信号信息例如为光本身的强度(lux的值等)。光信号信息通常为观测自然界的光所得到的信息。光信号信息例如为显示信号范围的范围信息。光信号信息例如为显示单位时间或一定时间内光量的变化的光量变化信息。光信号信息例如为显示单位时间或一定时间内光源扩散度的变化的扩散度变化信息。扩散度变化信息,例如为扩散的角度。光信号信息例如为显示单位时间或一定时间内光源的位置连续地改变的光源位置变化信息。光源位置变化信息例如为起点的坐标位置、终点的坐标位置以及移动速度。此外,光信号信息例如为显示照在图像中的对象的光是直射光或是漫射光的信息。此外,光信号信息例如为显示图像的一部分(例如,图像中的一区块)的对象所反射的光是镜面反射或是漫反射的信息。
此外,电信号信息是指关于电信号的信息。电信号信息例如为显示电信号的特性的信息(也可称为电信号特性)。电信号信息例如为显示以特定的比特数(例如,10bit)进行量子化的信息以及显示信号范围的信息(例如,64~940)。电信号信息例如为适当的电信号的变化量。电信号信息例如为电信号本身的强度(像素值)。电信号信息例如为后述的处理辨识码。电信号信息例如为指定图像的变化的图像变化指定信息。图像变化指定信息例如为显示像素值的变化量的信息以及显示亮度的变化量的信息。
在光信号信息为光量变化信息,且电信号信息为图像变化指定信息的情况时,对应信息为指定使光量变化时的图像的变化的信息。此外,在光信号信息为扩散度变化信息,且电信号信息为图像变化指定信息的情况,对应信息为指定使光源的扩散度变化时的图像的变化的信息。此外,在光信号信息为光源位置变化信息,且电信号信息为图像变化指定信息的情况时,对应信息为指定使光源的位置变化时的图像的变化的信息。光源的位置的变化例如是指对于被摄体“由正上面到正侧面”及“由顺光到逆光”等。
此外,对应信息也可为具有2个以上的对应记录的查找表(look-up table),该对应记录显示光信号信息及电信号信息的对应关系。
在此,查找表例如为显示光信号及电信号的行为运作的对应关系的信息。例如,显示对应关系的信息例如是指量子化的电信号的信号范围,以及与该电信号的信号范围对应且为无限灰阶的光信号的信号范围。此外,显示对应关系的信息例如是指电信号变化时,光信号的变化的存在容许范围。即,查找表及对应信息也可仅为光信号信息。
此外,查找表具有1或2个以上的对应记录。对应记录为用于取得1个或2个以上的输入图像的全部或者一部分与1个或2个以上的输出图像的全部或者一部分的对应关系的信息。在查找表所具有的对应记录为1个的情况下,该对应记录例如为转换图像的演算式,或提供给转换图像的演算式的1个以上的参数群。再者,参数例如为乘加运算的系数、变更明暗差异或对比的程度、以及判断参数等。判断参数为利用在判断的临界值,例如判断镜面反射或漫反射的像素值等的临界值,以及判断直射光或漫射光的像素值等的临界值等。
此外,对应信息也可以具有作为演算式的光信号信息或电信号信息所述演算式与输入图像对应且使抽头(tap)于时间空间扩展。演算式,例如为对输入图像的多个抽头乘上预定的系数并乘积加总的式子。此外,演算式例如为对输入图像的多个抽头乘上从光信号信息所求得的系数并乘积加总的式子。再者,抽头是指输入图像的目标像素及其附近像素的像素值。即,所谓使抽头于时间空间扩展的演算式是指乘积加总演算的演算式,该乘积加总演算将输入图像的目标像素及其附近像素的像素值乘上预定的系数,算出所乘算后的全部的结果的总和。此外,输入图像的目标像素及其附近的像素为2个以上的像素,其数量没有限制。
对应信息也可为具有2个以上的对应记录的查找表,该对应记录显示光信号信息与辨识处理的处理辨识码的对应关系。处理辨识码为对应实现处理的程序的信息,例如程序名称、执行模块名称、以及程序ID等。
接收部12接收各种信息。各种的信息例如是指输入图像、以及光信号信息等。在此,接收通常是指透过有线或无线的通讯线路所传输的信息的接收,也为包含由光盘片或磁盘片、半导体存储器等的记录介质中所读取的信息的接收,以及由键盘或鼠标、触控面板等的输入设备所输入的信息的接收等的概念。
输入图像接收部121接收输入图像。输入图像例如为由未图示的播放装置所传输的图像。此外,输入图像例如为存储在记录介质中的图像。输入图像接收部121接收的输入图像通常为2个以上的输入图像(也可称为帧或场),也可为一个输入图像(也可称为帧或场)。此外,所接收的多个的帧或场也可单纯称作输入图像。
用户指令接收部122接收用户指令。用户指令例如为变更光信号信息的指令的光信号信息变更指令。在此,接收是指包含由键盘或鼠标、触控面板等的输入设备所输入的信息的接收,透过有线或无线的通讯线路所传输的信息的接收,以及由光盘片或磁盘片、半导体存储器等的记录介质中所读取的信息的接收等的概念。用户指令的输入单元为藉由触控面板、键盘、鼠标或操作画面等,任何方法皆可。
处理部13进行各种的处理。各种的处理例如是指光信号信息取得部131、转换处理部132进行的处理。
光信号信息取得部131取得与从输入图像接收部121接收输入图像中所取得的电信号信息对应的光信号信息。光信号信息取得部131通常利用存储部11的对应信息来取得与从输入图像接收部121接收的输入图像中取得的电信号信息对应的光信号信息。
首先,光信号信息取得部131从输入图像接收部121所接收的输入图像中取得1个以上的电信号信息。接着,光信号信息取得部131取得与1个以上的各电信号信息对应的光信号信息。光信号信息取得部131通常利用存储部11的对应信息来取得与1个以上的各电信号信息对应的光信号信息。
光信号信息取得部131例如选择与从输入图像接收部121接收的输入图像中取得的电信号信息一致或者最接近的电信号信息对应的对应记录,并取得与所选择的对应记录对应的光信号信息。
光信号信息取得部131也可取得例如对应于从输入图像接收部121接收的输入图像中所取得的电信号信息的演算式。
光信号信息取得部131也可选择与从输入图像接收部121接收的输入图像中取得的电信号信息一致或者最接近的电信号信息对应的对应记录,并取得作为与所选择的对应记录对应的处理辨识码的光信号信息。
光信号信息取得部131也可取得对于对应电信号信息而取得的光信号信息进一步根据用户指令接收部122所接收的光信号信息变更指令而加入变更的光信号信息。用户指令例如是指光量变为2倍、变更光源的扩散度、以及变更光学的位置等。
例如,在用户指令为“光量变为2倍”的指令,对应信息内所存储的光信号信息为光本身的强度的情况下,首先,光信号信息取得部131选择与从输入图像接收部121接收的输入图像中取得的电信号信息一致或者最接近的电信号信息对应的对应记录,并取得与所选择的对应记录对应的光信号信息(光的强度)。其次,光信号信息取得部131取得将取得的光信号信息变为2倍的光信号信息。
转换处理部132利用光信号信息取得部131取得的光信号信息,来进行从输入图像中取得输出图像的转换处理。转换处理部132通常是利用输入图像接收部121接收的输入图像,以及光信号信息取得部131取得的光信号信息,来进行从输入图像中取得输出图像的转换处理。
转换处理例如为后述的高画质化处理、后述的高分辨率化处理、以及后述的噪声去除处理等,处理的内容则不限。转换处理例如进行将输入图像透过先前技术的图像转换处理(例如,日本特开2012-252685、日本特开2012-252686、日本再表2013/061810等所记载的先前的转换处理)之后,判断转换结果的图像作为电信号是否存在超出容许范围的信号,在存在超出容许范围的信号的情况下,进行再量子化用以不要产生信号的舍去。
例如,在光信号信息为光量变化信息的情况下,转换处理部132利用该光量变化信息,来从输入图像中取得输出图像。例如,在所谓光信号信息为“光量变为2倍”的光量变化信息的情况下,转换处理部132不是单纯将全部像素的亮度值变为2倍,还考虑光学的特性以及被摄体的反射特性,对于各像素或各区块,得到等同于实际光量变为2倍时所观测到的像素或区块,进而组成输出图像。
例如,在光信号信息为扩散度信息的情况下,利用该扩散度信息,来从输入图像中取得输出图像。例如,在光信号信息为“显示光源为直射光的信息”的情况下,转换处理部132变更输入图像用以加强输入图像的阴影,进而取得输出图像。另一方面,例如,在光信号信息为“显示光源为间接光的信息”的情况下,转换处理部132进行例如弱化输入图像的阴影的处理,进而取得输出图像。再者,转换处理部132例如进行调整构成输入图像的各区块内的对比的处理,调整阴影的强弱。
例如,在光信号信息为光源位置变化信息的情况下,利用该光源位置变化信息,来从输入图像中取得输出图像。转换处理部132,例如依照光源位置变化信息变更输入图像中阴影的方向及长度。此外,转换处理部132例如检测输入图像中被摄体的方向,根据该方向,来调整光反射的强度。
转换处理部132也可利用光信号信息取得部131取得的演算式,来转换输入图像,进行取得输出图像的转换处理。再者,演算式为光信号信息的一例。
转换处理部132也可执行藉由光信号信息取得部131取得的处理辨识码进行辨识的处理,进行从输入图像中取得输出图像的转换处理。在该情况下,转换处理部132例如叫出对应光信号信息取得部131取得的处理辨识码的处理,将输入图像加到该函数中,并取得输出图像。再者,处理可为函数,也可为模块,还可为面向对象程序中的消息。
转换处理部132例如可利用光信号信息取得部131取得的光信号信息,来进行将输入图像转换成更高画质的图像的高画质化处理,并取得输出图像。高画质化是指转换成更具质感、远近感等的图像的处理。由于高画质化处理属于先前技术,因此省略详细说明。
转换处理部132例如也可利用光信号信息取得部131取得的光信号信息,来进行将输入图像转换为更高分辨率的图像的高分辨率化处理,并取得输出图像。高分辨率化处理包含各种可能的先前技术,其内容则不限。
转换处理部132例如也可利用光信号信息取得部131取得的光信号信息,来对于输入图像进行噪声去除处理,并取得输出图像。噪声去除处理包含各种可能的先前技术,其内容则不限。
转换处理部132例如以下所述,也可藉由光朝输入图像中的对象的照射方向以及物体的反射特性,来改变处理。再者,对象是指输入图像中的任何东西皆可,例如,输入图像中的山、川等的自然,人、动物等的生物,杯子、屋子等的静物等。
即,光信号信息取得部131解析输入图像,利用输入图像的电信号信息,来判断照在图像中的对象的光是直射光或是漫射光。然后,在直射光的情况下,转换处理部132例如修正输入图像的各像素的像素值用以强调输入图像整体的明暗的差异或对比。另一方面,在漫射光的情况下,转换处理部132例如修正输入图像的各像素的像素值用以不改变输入图像整体的明暗的差异或对比,或者减少输入图像整体的明暗的差异或对比。再者,光信号信息取得部131例如利用输入图像的各像素的像素值、输入图像的各像素的亮度、输入图像的各像素的像素值的分布、以及输入图像的个像素的亮度的分布等来判断是直射光或是漫射光。
此外,光信号信息取得部131将输入图像分割成2个以上的区块,利用各区块的电信号信息来判断各区块中的对象所反射的光是镜面反射或是漫反射。然后,对于镜面反射的区块,转换处理部132例如修正该区块的各像素的像素值用以强调区块整体的明暗的差异或对比。另一方面,对于漫反射的区块。转换处理部132例如修正区块的各像素的像素值用以不改变区块整体的明暗的差异或对比,或者减少区块整体的明暗的差异或对比。再者,光信号信息取得部131,例如利用区块的各像素的像素值、区块的各像素的亮度,区块的各像素的像素值的分布、以及区块的各像素的亮度的分布等来判断是镜面反射或是漫反射。
此外,强调输入图像或区块的整体其明暗的差异或对比的处理、以及使输入图像或区块的整体的明暗的差异或对比减少的处理包含各种可能的先前技术,其内容则不限。
进一步,光信号信息取得部131将输入图像分割成2个以上的区块的情况下,分割的方法则不限。光信号信息取得部131例如将输入图像分割成相同尺寸的矩形方块。
转换处理部132例如也可对于输入图像,进行第一转换处理取得输出图像的候选,判断该输出图像的候选其信号强度是否落入在范围信息的显示范围内,在判断该输出图像的候选其信号强度没有落入在范围信息的显示范围内的情况下,可将输入图像进行再量子化,转换输入图像用以使信号强度在范围信息的显示范围内,并取得输出图像。再者,第一转换处理通常是指先前的图像转换处理。第一转换处理例如是指上述的先前转换处理。再者,转换处理部132例如对于输入图像,进行第一转换处理取得输出图像的候选,判断该输出图像的候选的信号强度落入在范围信息的显示范围内的情况下,该输出图像的候选成为输出图像。
转换处理部132也可例如重复输出图像的信号强度在范围信息的显示范围内之类的信号强度收敛至范围信息的显示范围的转换处理2次以上,并取得输出图像。
光信号信息变更部133,依照用户指令输入部122接收的光信号信息变更指令,来变更所存储的光信号信息。再者,存储的光信号信息例如为光信号信息取得部131对应电信号信息而取得的光信号信息,或者是存储部11的对应信息具有的光信号信息。
输出部14输出转换处理部132取得的输出图像。在此,输出是指包含对显示器的表示、利用投影机的投影、用打印机的印字、声音输出、对外部装置的传输、对记录介质的存储、以及对其他处理装置和其他程序等的处理结果的发送等的概念。
存储部11优选为非挥发性的记录介质,但也能够由挥发性的记录介质来实现。
存储部11中信息存储的过程则不限。例如可经过记录介质将信息存储在存储部11、可经由通讯线路将传输的信息存储在存储部11、或者可经过输入设备将输入的信息存储在存储部11。
用户指令接收部122可以用触控面板及键盘等的输入单元的设备驱动器、以及操作画面的控制软件等来实现。
处理部13、光信号信息取得部131、转换处理部132、以及光信号信息变更部133通常由MPU及存储器等来实现得到。处理部13等的处理过程通常以软件来实现,该软件记录在ROM等的记录介质中。但是,也可用硬件(专用线路)来实现。
输出部14可认为包含或认为不包含显示器及扬声器等的输出设备。输出部14可以用输出设备的驱动软件,或者输出设备的驱动软件和输出设备等来实现。
其次,利用图2的流程图来说明影像信号处理装置1的运作。
(工序S201)输入图像接收部121判断是否接收到输入图像。接收输入图像的情况则进入工序S202,没有接收输入图像的情况则返回工序S201。
(工序S202)光信号信息取得部131由在工序S201接收的输入图像中取得1个以上的电信号信息。
(工序S203)光信号信息取得部131利用存储部11的对应信息,取得与在工序S202取得的电信号信息对应的光信号信息。
(工序S204)转换处理部132利用光信号信息取得部131取得的光信号信息,来进行从在工序S201中接收的输入图像中取得输出图像的转换处理。
(工序S205)输出部14输出在工序204取得的输出图像。完成处理。
再者,在图2的流程图中,工序S202也可不存在。这样的情况下,光信号信息取得部131取得的电信号信息是为了在自然界的光的行为运作范围中来构成输出图像所利用的信息。电信号信息例如为显示后述信号范围的信息(64~940)。
(具体例)
以下,说明本实施方式中影像信号处理装置1其具体的运作。
此时,存储部11具有显示光信号特性与电信号特性的对应关系的对应信息。光信号特性为显示具有无限的分辨率的信息,显示没有信号范围的上限或下限的信息。此外,电信号特性为显示以10bit量子化的信息、以及显示信号范围的信息(64~940)。对应信息例如为显示电信号信息与光信号信息强度范围对应关系的信息。对应信息,例如是显示电信号的强度、以及光信号的强度的对应关系的信息。
此外,在本具体例中的转换处理在进行将输入图像透过先前技术的图像转换处理(第一转换处理,例如上述的先前转换处理)之后,判断转换结果的图像作为电信号是否存在超出容许范围的信号,在存在超出容许范围的信号的情况下,进行再量子化用以不要产生信号的舍去的处理。
此刻,输入图像接收部121接收输入图像。然后,接收的输入图像其信号准位的频率分布如图3所示,再者,图3的横轴为信号强度,纵轴为频率。
其次,处理部13对于输入图像,进行上述先前的转换处理取得输出图像的候选。该输出图像的候选为如图4所示的频率分布。
其次,光信号信息取得部131从输入图像中取得信号强度(电信号的强度)。
其次,光信号信息取得部131从存储部11的对应信息中取得与取得的电信号的信号强度对应的光信号的强度。
然后,转换处理部132转换输入图像用以对应光信号的强度,而得到输出图像的候选。其次,转换处理部132判断输出图像的候选其电信号的信号强度是否落入在显示信号范围的信息的范围内。在此,转换处理部132例如判断输出图像的候选的信号强度没有落入在显示信号范围的信息范围(64~940)内。
其次,转换处理部132将输入图像进行再量子化,来转换输入图像以使信号强度落入在显示信号范围的信息范围内,并得到输出图像。该输出图像例如图5所示的频率分布。
其次,输出部14输出取得的输出图像。再者,可以说此输出图像是依照以光信号为法则的图像。
以上,根据本实施方式,能够实现考虑自然界的光的行为运作的影像信号处理。
进一步,本实施方式中的处理也可由软件来实现。然后,也可藉由软件下载来分配此软件。此外,也可记录在CD-ROM等的记录介质中来发配此软件。再者,上述方式亦适用于本说明书中其他的实施方式。再者,实现本实施方式中的影像信号处理装置1的软件如以下的程序。即,在此程序中,能够接入计算机的记录介质具备存储对应信息的存储部,该对应信息显示关于在取得图像的环境中的光信号的光信号信息以及关于在取得图像的环境中的电信号的电信号信息的对应关系,该程序为使计算机产生下述各部功能的程序:接收输入图像的输入图像接收部;利用所述对应信息来取得与从所述输入图像接收部所接收的输入图像中取得的电信号信息对应的光信号信息的光信号信息取得部;利用所述光信号信息取得部所取得的光信号信息,来进行从所述输入图像中取得输出图像的转换处理的转换处理部;以及输出所述转换处理部取得的输出图像的输出部。
此外,上述程序中,优选为下述程序:所述对应信息为具有显示电信号信息与光信号信息的对应关系的2个以上对应记录的查找表,所述光信号信息取得部选择与从所述输入图像接收部所接收的输入图像中取得的电信号信息一致或者最接近的电信号信息对应的对应记录,并取得与所选择的对应记录对应的光信号信息的程序。
此外,所述程序中,优选为下述程序:所述对应信息具有作为演算式的电信号信息,所述演算式与电信号信息对应且使抽头于时间空间扩展,所述光信号信息取得部取得对应于从所述输入图像接收部所接收的输入图像中取得的电信号信息的演算式,所述转换处理部利用所述光信号信息取得部所取得的演算式,来转换所述输入图像,并进行取得输出图像的转换处理。
此外,在上述程序中,优选为下述程序:所述对应信息为具有显示电信号信息与辨识处理的处理辨识码对应关系的2个以上的对应记录的查找表,所述光信号信息取得部选择与从所述输入图像接收部所接收的输入图像中取得的电信号信息一致或者最接近的电信号信息对应的对应记录,并取得作为与所选择的对应记录对应的处理辨识码的光信号信息,所述转换处理部执行藉由所述光信号信息取得部所取得的处理辨识码所辨识的处理,进行从所述输入图像中取得输出图像的转换处理。
此外,在上述程序中,优选为下述程序:所述转换处理部利用所述光信号信息取得部取得的光信号信息,来进行将所述输入图像转换为更高画质的图像的高画质化处理,并取得输出图像。
此外,上述程序中,优选为下述程序:所述转换处理部利用所述光信号信息取得部所取得的光信号信息,来进行将所述输入图像转换为更高分辨率的图像的高分辨率化处理。
此外,在上述程序中,优选为下述程序:所述转换处理部利用所述光信号信息取得部所取得的光信号信息,来对所述输入图像进行噪声去除处理,并取得输出图像。
此外,在上述程序中,优选为下述程序:所述光信号信息为显示光信号及电信号的信号范围的范围信息,所述转换处理部对所述输入图像,进行第一转换处理取得输出图像的候选,判断该输出图像的候选的信号强度是否落入在所述范围信息显示的范围内,在判断该输出图像的候选的信号强度没有落入在所述范围信息显示的范围内的情况下,将所述输入图像进行再量子化,来转换输入图像用以使信号强度落入在所述范围信息显示的范围内,并取得输出图像。
此外,图6为显示执行本说明书中述及的程序,来实现上述各种实施方式的影像信号处理装置1的计算机外观。上述的实施方式透过计算机硬件以及其上所执行的计算机程序来实现得到。图6为此计算机系统300的概观图,图7为系统300的方块图。
图6中,计算机系统包含含有CD-ROM驱动器3012的计算机301、键盘302、鼠标303、以及屏幕304。
图7中,计算机301包含CD-ROM驱动器3012、MPU 3013、总线3014、ROM 3015、RAM3016、以及硬盘3017。ROM 3015存储启动程序等的程序。RAM 3016连接至MPU 3013,暂时地存储应用程序的指令的同时也提供暂时存储空间。硬盘3017通常是存储应用程序、系统程序、以及数据。在此,虽然未图示,计算机301进一步也可包含提供对LAN连接的网络卡。
计算机系统300中,执行上述实施方式中的影像信号处理装置等的功能的程序可存储在CD-ROM 3101、插入CD-ROM驱动器3012,进一步传送至硬盘3017。此外,程序也可经由未图示的网络传输至计算机301,存储在硬盘3017中。程序执行的时候加载至RAM 3016中。程序也可由CD-ROM 3101或网络直接加载。
程序也可不一定要在计算机301内包含使上述实施方式的影像信号处理装置等的功能执行的操作系统(OS)、或者第三方程序(third party program)等。程序也可在受控的态样下叫出适当的模块,仅包含以得到期望结果的命令的部分。计算机系统300是如何运作的是周知的,省略详细的说明。
再者,在上述的程序中,传输信息的工序、以及接收信息的工序等当中是不包含藉由硬件所进行的处理,例如以传输工序中的调制解调器(modem)及适配卡等所进行的处理(仅以硬件进行的处理)。
此外,执行上述程序的计算机可为单数个,也可为多个。也就是说,可以进行集中处理,也可以进行分散处理。
此外,在上述各个实施方式中,存在于一个装置中的2个以上的通信单元(终端信息传输部、终端信息接收部等)当然可物理性地由一个介质来实现。
此外,在上述各实施方式中,各处理(各功能)可藉由透过单一装置(系统)集中处理来实现,或者由多个装置透过分散处理来实现。
本发明并不局限于以上的实施方式,可以有各种的变化,这些变化当然也包含在本发明的范畴内。
产业利用性
如上所述,本发明中该影像信号装置具有的效果在于能够实现考虑自然界的光的行为运作的映像信号处理,适用作为电视接受器等。
附图标记说明
1 影像信号处理装置
11 存储部
12 接收部
13 处理部
14 输出部
121 输入图像接收部
131 光信号信息取得部
132 转换处理部

Claims (15)

1.一种影像信号处理装置,其特征在于,具备:
存储部,存储显示光信号信息与电信号信息对应关系的对应信息,所述光信号信息是关于在取得图像的环境中的光信号,且所述电信号信息是关于在取得图像的环境中的电信号;
输入图像接收部,接收输入图像;
光信号信息取得部,利用所述对应信息来取得光信号信息,所述光信号信息是与从所述输入图像接收部所接收的输入图像中取得的电信号信息对应;
转换处理部,利用所述光信号信息取得部所取得的光信号信息,来进行从所述输入图像中取得输出图像的转换处理;以及
输出部,输出所述转换处理部取得的输出图像。
2.根据权利要求1所述的影像信号处理装置,其特征在于,
所述对应信息为具有2个以上的对应记录的查找表,所述对应记录显示电信号信息与光信号信息的对应关系,
所述光信号信息取得部选择与从所述输入图像接收部所接收的输入图像中取得的电信号信息一致或者最接近的电信号信息对应的对应记录,并取得与该所选择的对应记录对应的光信号信息。
3.根据权利要求1所述的影像信号处理装置,其特征在于,
所述对应信息具有作为演算式的电信号信息,所述演算式与电信号信息对应且使抽头于时间空间扩展,
所述光信号信息取得部取得与从所述输入图像接收部所接收的输入图像中取得的电信号信息对应的演算式,
所述转换处理部利用所述光信号信息取得部所取得的演算式,来转换所述输入图像,并进行取得输出图像的转换处理。
4.根据权利要求1所述的影像信号处理装置,其特征在于,
所述对应信息为具有2个以上的对应记录的查找表,所述对应记录显示电信号信息与辨识处理的处理辨识码的对应关系,
所述光信号信息取得部选择与从所述输入图像接收部所接收的输入图像中取得的电信号信息一致或者最接近的电信号信息对应的对应记录,并取得作为与该所选择的对应记录对应的处理辨识码的光信号信息,
所述转换处理部执行藉由所述光信号信息取得部所取得的处理辨识码所辨识的处理,进行从所述输入图像中取得输出图像的转换处理。
5.根据权利要求1至4中任一项所述的影像信号处理装置,其特征在于,
所述转换处理部利用所述光信号信息取得部所取得的光信号信息,来进行将所述输入图像转换为更高画质的图像的高画质化处理,并取得输出图像。
6.根据权利要求1至4中任一项所述的影像信号处理装置,其特征在于,
所述转换处理部利用所述光信号信息取得部所取得的光信号信息,来进行将所述输入图像转换为更高分辨率的图像的高分辨率化处理,并取得输出图像。
7.根据权利要求1至4中任一项所述的影像信号处理装置,其特征在于,
所述转换处理部利用所述光信号信息取得部所取得的光信号信息,来对所述输入图像进行噪声去除处理,并取得输出图像。
8.根据权利要求1至4中任一项所述的影像信号处理装置,其特征在于,
所述光信号信息为显示光信号及电信号的信号范围的范围信息,
所述转换处理部对所述输入图像进行第一转换处理来取得输出图像的候选,判断该输出图像的候选的信号强度是否落入所述范围信息显示的范围内,在判断该输出图像的候选的信号强度没有落入所述范围信息显示的范围内的情况下,将所述输入图像进行再量子化,来转换输入图像用以使信号强度落入所述范围信息显示的范围内,并取得输出图像。
9.根据权利要求1至4中任一项所述的影像信号处理装置,其特征在于,
所述光信号信息取得部利用从所述输入图像中所取得的电信号信息,来判断照在该输入图像中的对象的光是直射光或是漫射光,
所述转换处理部在所述光信号信息取得部判断是直射光的情况下,修正所述输入图像的各像素的像素值用以强调所述输入图像整体的明暗差异或对比,并进行从所述输入图像中取得输出图像的转换处理。
10.根据权利要求1至4中任一项所述的影像信号处理装置,其特征在于,
所述光信号信息取得部利用从所述输入图像中所取得的电信号信息,来判断照在该输入图像中的对象的光是直射光或是漫射光,
所述转换处理部在所述光信号信息取得部判断是漫射光的情况下,修正所述输入图像的各像素的像素值用以减少所述输入图像整体的明暗差异或对比,并进行从所述输入图像中取得输出图像的转换处理。
11.根据权利要求1至4中任一项所述的影像信号处理装置,其特征在于,
所述光信号信息取得部将所述输入图像分割成2个以上的区块,利用各区块的电信号信息来判断各区块中的对象所反射的光是镜面反射或是漫反射,
所述转换处理部对于所述光信号信息取得部判断是镜面反射的区块,修正该区块的各像素的像素值用以强调该区块整体的明暗差异或对比,并进行从所述输入图像中取得输出图像的转换处理。
12.根据权利要求1至4中任一项所述的影像信号处理装置,其特征在于,
所述光信号信息取得部将所述输入图像分割成2个以上的区块,利用各区块的电信号信息来判断各区块中的对象所反射的光是镜面反射或是漫反射,
所述转换处理部对于所述光信号信息取得部判断是漫反射的区块,修正该区块的各像素的像素值用以减少该区块整体的明暗差异或对比,并进行从所述输入图像中取得输出图像的转换处理。
13.根据权利要求1至12中任一项所述的影像信号处理装置,其特征在于,进一步具备:
用户指令接收部,接收变更光信号信息的光信号信息变更指令;以及
光信号信息变更部,依照所述光信号信息变更指令,来变更所存储的光信号信息,
所述转换处理部利用藉由所述光信号信息变更指令所变更的光信号信息来取得输出图像。
14.一种影像信号处理方法,记录媒体具备存储部,所述存储部存储显示光信号信息与电信号信息的对应关系的对应信息,所述光信号信息是关于在取得图像的环境中的光信号,所述电信号信息是关于在取得图像的环境中的电信号,并且藉由输入图像接收部、光信号信息取得部、转换处理部以及输出部来实现,
其特征在于,具备:
输入图像接收工序,由所述输入图像接收部接收输入图像;
光信号信息取得工序,由所述光信号信息取得部取得对应于电信号信息的光信号信息,所述电信号信息从在所述输入图像接收工序中所接收的输入图像中来取得;
转换处理工序,由所述转换处理部利用在所述光信号信息取得工序中取得的光信号信息,来进行从所述输入图像中取得输出图像的转换处理;以及
输出工序,由所述输出部输出在所述转换处理工序中取得的输出图像。
15.一种程序,其特征在于,用于使计算机作为输入图像接收部、光信号信息取得部、转换处理部以及输出部而产生功能,所述计算机能够接入具备存储部的记录介质,所述存储部存储显示光信号信息及电信号信息的对应关系的对应信息,所述光信号信息是关于在取得图像的环境中的光信号,所述电信号信息是关于在取得图像的环境中的电信号,
所述输入图像接收部接收输入图像;
所述光信号信息取得部利用所述对应信息来取得与从所述输入图像接收部所接收的输入图像中取得的电信号信息对应的光信号信息;
所述转换处理部利用所述光信号信息取得部所取得的光信号信息,来进行从所述输入图像中取得输出图像的转换处理;
所述输出部输出所述转换处理部所取得的输出图像。
CN201780038350.9A 2016-06-30 2017-06-29 影像信号处理装置、影像信号处理方法及程序 Pending CN109417647A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016129687 2016-06-30
JP2016-129687 2016-06-30
PCT/JP2017/024008 WO2018003937A1 (ja) 2016-06-30 2017-06-29 映像信号処理装置、映像信号処理方法、およびプログラム

Publications (1)

Publication Number Publication Date
CN109417647A true CN109417647A (zh) 2019-03-01

Family

ID=60786065

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780038350.9A Pending CN109417647A (zh) 2016-06-30 2017-06-29 影像信号处理装置、影像信号处理方法及程序

Country Status (6)

Country Link
US (1) US11025833B2 (zh)
EP (1) EP3481074A4 (zh)
JP (1) JPWO2018003937A1 (zh)
CN (1) CN109417647A (zh)
TW (1) TW201803340A (zh)
WO (1) WO2018003937A1 (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1184501A (ja) * 1997-09-02 1999-03-26 Canon Inc カメラ装置、レンズ装置及びカメラシステム
EP1465003A1 (en) * 1999-04-02 2004-10-06 Olympus Corporation Viewing optical system and image display apparatus using the same
EP1667066A1 (en) * 2003-09-11 2006-06-07 Matsushita Electric Industrial Co., Ltd. Visual processing device, visual processing method, visual processing program, integrated circuit, display device, imaging device, and mobile information terminal
JP2013172224A (ja) * 2012-02-20 2013-09-02 Hitachi Consumer Electronics Co Ltd 映像処理装置および映像表示装置
CN104954771A (zh) * 2014-03-31 2015-09-30 佳能株式会社 进行色阶校正的图像处理设备和图像处理方法

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06233136A (ja) * 1993-02-08 1994-08-19 Konica Corp 画像処理方法
JP3912869B2 (ja) * 1997-10-17 2007-05-09 三菱重工業株式会社 交通流計測装置
JP3417462B2 (ja) * 1998-03-06 2003-06-16 三菱自動車工業株式会社 車両の進路推定装置
JP2006065676A (ja) * 2004-08-27 2006-03-09 Canon Inc 画像処理装置およびその方法
JP2007243551A (ja) * 2006-03-08 2007-09-20 Seiko Epson Corp 画像処理装置および撮像装置
US8411979B2 (en) 2007-07-26 2013-04-02 Omron Corporation Digital image processing and enhancing system and method with function of removing noise
JP2011254133A (ja) * 2010-05-31 2011-12-15 Renesas Electronics Corp 映像データ処理システム及び方法
JP6134267B2 (ja) * 2011-10-26 2017-05-24 アイキューブド研究所株式会社 画像処理装置、画像処理方法、および記録媒体
JP6070223B2 (ja) 2013-01-31 2017-02-01 株式会社Jvcケンウッド 映像信号処理装置及び方法
JP6040042B2 (ja) * 2013-02-12 2016-12-07 アイキューブド研究所株式会社 画像処理装置、画像処理方法、およびプログラム
US9565388B2 (en) 2013-04-03 2017-02-07 Hitachi Maxell, Ltd. Video display device

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1184501A (ja) * 1997-09-02 1999-03-26 Canon Inc カメラ装置、レンズ装置及びカメラシステム
EP1465003A1 (en) * 1999-04-02 2004-10-06 Olympus Corporation Viewing optical system and image display apparatus using the same
EP1667066A1 (en) * 2003-09-11 2006-06-07 Matsushita Electric Industrial Co., Ltd. Visual processing device, visual processing method, visual processing program, integrated circuit, display device, imaging device, and mobile information terminal
JP2013172224A (ja) * 2012-02-20 2013-09-02 Hitachi Consumer Electronics Co Ltd 映像処理装置および映像表示装置
CN104954771A (zh) * 2014-03-31 2015-09-30 佳能株式会社 进行色阶校正的图像处理设备和图像处理方法

Also Published As

Publication number Publication date
TW201803340A (zh) 2018-01-16
EP3481074A1 (en) 2019-05-08
US20200186724A1 (en) 2020-06-11
JPWO2018003937A1 (ja) 2019-05-23
EP3481074A4 (en) 2020-01-08
US11025833B2 (en) 2021-06-01
WO2018003937A1 (ja) 2018-01-04

Similar Documents

Publication Publication Date Title
US8571307B2 (en) Method and system operative to process monochrome image data
KR101521041B1 (ko) 가중 인코딩을 위한 방법 및 시스템
US9584785B2 (en) One pass video processing and composition for high-definition video
US20130121572A1 (en) Methods and Apparatus for Tone Mapping High Dynamic Range Images
US8713456B2 (en) Establishing a graphical user interface (‘GUI’) theme
JP6502947B2 (ja) 高ダイナミックレンジ画像をトーンマッピングする方法及びデバイス
BR112013028556B1 (pt) Aparelho e método para gerar um sinal de imagem e aparelho e método para processar um sinal de imagem
US20090322889A1 (en) Method and apparatus for illuminating users of video communication devices
EP3254259A1 (en) Method and apparatus for processing high dynamic range images
US10418000B2 (en) Method and apparatus for screen capture on a display device
JP5782838B2 (ja) 画像処理装置及び画像処理プログラム
CN115831061A (zh) 墨水屏显示方法、装置、终端设备和存储介质
CN109417587A (zh) 图像输出装置、图像输出方法以及程序
CN109417647A (zh) 影像信号处理装置、影像信号处理方法及程序
KR20100080097A (ko) 비트 맵 방식의 영상 인코딩/디코딩 방법 및 장치
CN111930461B (zh) 基于Android的移动端APP全量页面灰度化方法和装置
KR100479679B1 (ko) 영상데이터의 휘도레벨 히스토그램 등화 장치 및 방법
CN111526366B (zh) 图像处理方法、装置、摄像设备和存储介质
JP2010278516A (ja) 画像処理装置、画像処理プログラム
KR100911059B1 (ko) 썸네일 생성 시스템 및 생성 방법
EP0533348A2 (en) Apparatus and method for providing and displaying a partially transparent image
Peres A Deeper Dive into Digital Devices
KR100916854B1 (ko) 썸네일 생성 시스템 및 생성 방법
JPS6339186B2 (zh)
CN116645918A (zh) 画面显示方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20190301