CN103875244A - 影像信号处理装置 - Google Patents

影像信号处理装置 Download PDF

Info

Publication number
CN103875244A
CN103875244A CN201280050459.1A CN201280050459A CN103875244A CN 103875244 A CN103875244 A CN 103875244A CN 201280050459 A CN201280050459 A CN 201280050459A CN 103875244 A CN103875244 A CN 103875244A
Authority
CN
China
Prior art keywords
depth information
depth
signal
image signal
video signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201280050459.1A
Other languages
English (en)
Inventor
富冈进一
影山敦久
谷内弘志
吉冈志郎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN103875244A publication Critical patent/CN103875244A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/122—Improving the 3D impression of stereoscopic images by modifying image signal contents, e.g. by filtering or adding monoscopic depth cues
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/144—Processing image signals for flicker reduction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/261—Image signal generators with monoscopic-to-stereoscopic image conversion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074—Stereoscopic image analysis
    • H04N2013/0081—Depth or disparity estimation from stereoscopic image signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Image Processing (AREA)

Abstract

为了获得最适于三维(3D)影像的进深强调的效果，设置：进深信息提取部(10)，其从输入影像信号计算出进深信息；2D／3D变换部(11)，其在输入影像信号是二维(2D)影像信号的情况下基于进深信息将该2D影像信号变换为3D影像信号即第1影像信号；补正系数计算部(12)，其根据进深信息计算出补正系数；选择部(13)，其选择输入影像信号和第1影像信号中的任意一者进行输出；和轮廓强调处理部(2)，其对于该选择部(13)的输出基于补正系数来进行强调处理并作为输出影像信号进行输出。

Description

影像信号处理装置
技术领域
本发明涉及影像信号处理装置，特别是涉及一种利用了进深信息的轮廓强调技术。
背景技术
根据某现有技术，通过从原图像提取进深信息，近前侧使轮廓清楚，纵深侧使轮廓模糊，来实现具有立体感的二维(2D)影像(参照专利文献1)。
此外，根据其他的现有技术，通过基于进深的分布决定轮廓强调的补正量，来实现2D影像的最佳进深强调(参照专利文献2)。
在先技术文献
专利文献
专利文献1：JP特开2007-264722号公报
专利文献2：JP特开2008-21163号公报
发明内容
发明要解决的课题
在将上述现有技术简单地应用于三维(3D)影像的情况下，由于分别从左眼(L)图像以及右眼(R)图像提取进深信息，因而在L／R图像的进深信息之间不能取得一致性，不能获得正确的进深感。而且，不能取得3D影像的进深与轮廓强调的进深信息的一致性。
本发明的目的在于提供一种能够获得最适于3D影像的进深强调的效果的影像信号处理装置。
解决课题的手段
为了达成上述目的，根据本发明，例如在2D／3D进深强调中，使用由2D／3D变换生成的进深信息来使近前侧清楚、使纵深侧模糊，由此实现具有立体感的3D影像。
具体来说，本发明所涉及的影像信号处理装置采用了如下构成，具备：进深信息提取单元，其从输入影像信号提取进深信息；2D／3D变换单元，其在所述输入影像信号是2D影像信号的情况下，基于所述进深信息将该2D影像信号变换为3D影像信号即第1影像信号；补正系数计算单元，其根据所述进深信息计算出补正系数；选择单元，其选择所述输入影像信号和所述第1影像信号中的任何一者进行输出；和强调处理单元，其对于所述选择单元的输出基于所述补正系数来进行强调处理并作为输出影像信号进行输出。
发明效果
根据本发明，通过根据2D／3D变换前的影像生成进深信息，并应用于2D／3D变换以及对3D影像的轮廓强调处理，能够获得最适于3D影像的进深强调的效果。
附图说明
图1是表示本发明所涉及的影像信号处理装置的构成例的框图。
图2是表示在图1的影像信号处理装置中输入信号是2D影像信号的情况下的输入信号波形的示例的时序图。
图3是表示在图1的影像信号处理装置中从2D影像信号通过变换而得到的3D影像信号、和从变换前的2D影像信号提取出的进深信息的示例的时序图。
图4是表示在图1的影像信号处理装置中输入信号是2D影像信号且未执行2D／3D变换的情况下的输入信号波形、和从2D影像信号提取出的进深信息的示例的时序图。
图5是表示在图1的影像信号处理装置中输入信号是3D影像信号的情况下的输入信号波形的示例的时序图。
图6是表示图1的影像信号处理装置的变形例的框图。
图7是表示图1中的补正系数计算部的详细构成例的框图。
图8是用于说明图7中的进深变换处理部的功能的图。
图9是用于说明图7中的滤波器处理部的功能的图。
图10是用于说明图7中的补正量调整处理部的功能的图。
图11是用于说明图7中的补正量调整处理部的其他功能的图。
图12是用于说明图7中的过补正抑制处理部的功能的图。
图13是用于说明图7中的放大色抑制处理部的功能的图。
图14是用于说明图7中的帧间处理部的功能的图。
图15是表示图7中的补正量调整处理部中的进深平均值与偏移量的关系的图。
图16是用于说明在进深平均值较小的情况下的图7中的补正量调整处理部中的特性调整的图。
图17是用于说明在进深平均值较大的情况下的图7中的补正量调整处理部中的特性调整的图。
图18是表示图7中的特征量提取部的详细构成例的框图。
图19是表示图18中的IIR滤波器的详细构成例的框图。
图20是用于说明图18的特征量提取部的功能的时序图。
具体实施方式
以下，基于附图对本发明的实施方式进行详细说明。
图1表示本发明所涉及的影像信号处理装置的构成例。图1的影像信号处理装置具备进深信息提取部10、2D／3D变换部11、补正系数计算部12、选择部13、HPF(High Pass Filter，高通滤波器)部14、乘法部15和加法部16，并能够将2D影像信号和3D影像信号中的任意一个作为输入影像信号(YUV信号)来接收。进深信息提取部10和2D／3D变换部11构成提取变换部1，HPF部14、乘法部15和加法部16构成轮廓强调处理部2。
进深信息提取部10根据输入影像信号(2D影像信号或3D影像信号)计算出进深信息。2D／3D变换部11在输入影像信号是2D影像信号的情况下，基于来自进深信息提取部10的进深信息将该2D影像信号变换为3D影像信号。因为该变换方法众所周知所以省略说明。补正系数计算部12根据来自进深信息提取部10的进深信息计算出补正系数。选择部13选择输入影像信号与2D／3D变换部11的输出即3D影像信号中的任意一者进行输出。另外，因为在提取变换部1中2D影像信号和3D影像信号共同使用进深信息提取部10，所以能够削减面积。
轮廓强调处理部2对于选择部13的输出基于所述补正系数进行强调处理并作为输出影像信号(YUV信号)来输出。若详细地进行说明，则HPF部14从2D影像信号或3D影像信号提取轮廓信息。乘法部15基于由补正系数计算部12得到的补正系数，对由HPF部14得到的轮廓信息进行补正。加法部16对乘法部15的输出与选择部13的输出进行相加计算。
图2表示在图1的影像信号处理装置中输入信号是2D影像信号的情况下的输入信号波形的示例。在垂直同步信号的各周期存在2D影像信号。
图3表示在图1的影像信号处理装置中使2D／3D变换部11执行动作的情况下，从2D影像信号通过2D／3D变换部11而得到的3D影像信号、和从2D／3D变换部11的变换前的2D影像信号提取出的进深信息的示例。选择部13选择通过2D／3D变换部11而得到的3D影像信号。构成3D影像信号的L图像和R图像交替地进行显示。在此情况下，通过使用从2D影像信号得到的进深信息对3D变换后的影像信号进行轮廓补正，来实现具有立体感的3D影像。
图4表示在图1的影像信号处理装置中输入信号以及输出信号都是2D影像信号且未使2D／3D变换部11执行动作的情况下的输入信号波形、和从2D影像信号提取出的进深信息的示例。选择部13选择输入影像信号即2D影像信号。在此情况下，通过不进行2D／3D变换，使用进深信息进行轮廓强调，来实现具有立体感的2D影像。
图5表示在图1的影像信号处理装置中输入信号以及输出信号都是3D影像信号且不使2D／3D变换部11执行动作的情况下的输入信号波形的示例。与图2的情况相比较垂直同步信号的重复频率变为2倍，在影像信号中L／R图像交替地出现。进深信息提取部10无需与3D影像的进深进行联动，就能够根据3D影像信号的特征来提取进深信息。或者，进深信息提取部10也能够从形成输入影像信号的L／R图像分别提取进深信息。通过基于从3D影像信号提取出的进深信息来进行轮廓补正，实现具有立体感的3D影像。
图6表示图1的影像信号处理装置的变形例。在图6中，接受轮廓强调处理部2的输出的3D／2D变换部17被追加到图1的构成中。由此，基于从3D影像信号提取出的进深信息进行轮廓补正之后，通过进行3D／2D变换来实现具有立体感的影像。通过基于从3D影像信号得到的正确的进深信息对轮廓强调的效果进行调节，能够获得更高精度的效果。另外，作为3D／2D变换部17，能够采用例如仅输出L图像而舍弃R图像的构成。
图7表示图1中的补正系数计算部12的详细构成例。图7的补正系数计算部12具备进深变换处理部20、滤波器处理部21、补正量调整处理部22、过补正抑制处理部23、放大色(expansive colour)抑制处理部24、选择部25、乘法部26、帧间处理部27和特征量提取部28。在以下的说明中，将从进深信息提取部10输入到补正系数计算部12中的进深信息表示为depth_org，并分别用depth_exp表示进深变换处理部20的输出进深信息，用depth_lpf表示滤波器处理部21的输出进深信息，用depth_gain表示补正量调整处理部22的输出进深信息，用depth_lum表示乘法部26的输出进深信息，用depth_coef表示帧间处理部27的输出进深信息即补正系数，用depth_av表示进深平均值，用depth_max表示进深最大值，用depth_min表示进深最小值。另外，进深平均值depth_av、进深最大值depth_max以及进深最小值depth_min例如是1帧内的进深信息depth_org的特征量。
以下，对图7中的各模块的功能详细地进行说明。
图8是用于说明图7中的进深变换处理部20的功能的图。由于若直接使用从进深信息提取部10输入的进深信息depth_org则有可能不能适当地调整轮廓强调的效果，因此采用基于扩展了动态范围后的进深信息depth_exp来进行轮廓强调。运算式表示如下：
depth_exp
=(|depth_org-I_DEPCORE|)×I_DEPGAIN
在此，I_DEPCORE以及I_DEPGAIN分别是常数。进深变换处理部20进行让进深信息的上限值与下限值的差变大那样的进深变换处理。
图9是用于说明图7中的滤波器处理部21的功能的图。在进深边界部分由于进深强调的效果的变化陡峭有可能看到伪轮廓而成为具有不谐调感的影像，因此滤波器处理部21对于扩展了动态范围后的进深信息depth_exp，进行基于LPF(Low Pass Filter，低通滤波器)的平滑滤波处理。另外，也可以省略进深变换处理部20，对从进深信息提取部10输入的进深信息depth_org进行平滑滤波。
图10是用于说明图7中的补正量调整处理部22的功能的图。补正量调整处理部22对于进行了平滑滤波后的进深信息depth_lpf，在大于第1进深值I_DEPSTL并且小于第2进深值I_DEPSTH的情况下进行变换为固定值即第3进深值的补正量调整。在图10中，I_DEPGAINH以及I_DEPLIMH是与近前侧增益相关的常数，I_DEPGAINL以及I_DEPLIML是与纵深侧增益相关的常数。通过该补正量调整处理部22得到的进深信息depth_gain相当于用于进行画质调整的增益。另外，也可以省略进深变换处理部20以及滤波器处理部21，从而补正量调整处理部22对从进深信息提取部10输入的进深信息depth_org进行补正量调整。此外，也可以仅省略滤波器处理部21，从而补正量调整处理部22对进深变换处理后的进深信息depth_exp进行补正量调整。
图11是用于说明图7中的补正量调整处理部22的其他功能的图。补正量调整处理部22对于进行了平滑滤波后的进深信息depth_lpf，在所述进深信息depth_lpf的值比小于第1进深值I_DEPSTL的第4进深值还小的情况下，进行变换为负的进深值的补正量调整。在表示增益的进深信息depth_gain是负的情况下，通过反转HPF(High Pass Filter，高通滤波器)的结果而变得模糊，能够更进一步增加立体感。此外，HPF反转型的LPF由于线性地进行从HPF向LPF的切换，因此能够实现无不谐调感的影像制作。
图12是用于说明图7中的过补正抑制处理部23的功能的图。过补正抑制处理部23对于补正量调整后的进深信息depth_gain，在输入影像信号的亮度为第1亮度值I_YPSTA以下或第2亮度值I_YPEND以上的情况下进行将所述进深信息的值补正得较小的过补正抑制处理。图12的纵轴表示增益lgainp，I_YPGAINU、I_YPGAIND、I_YPLIMU、I_YPLIMD都是常数。
图13是用于说明图7中的放大色抑制处理部24的功能的图。放大色抑制处理部24对于补正量调整后的进深信息depth_gain，在输入影像信号的亮度为第3亮度值I_YMSTA以上的情况下进行抑制所述进深信息的值的放大色抑制处理。图13的纵轴表示增益lgainm，I_YPGAINU、I_YMLIML都是常数。
在图7中，选择部25将过补正抑制处理部23的输出或放大色抑制处理部24的输出中的任意一者提供给乘法部26。乘法部26通过对补正量调整処理部22的输出即进深信息depth_gain、与选择部25的输出即增益lgainp或lgainm相乘，来生成进深信息depth_lum。运算式在depth_gain>1时如下所示：
depth_lum=1+(depth_gain-1)×lgainp
在depth_gain<1时如下所示：
depth_lum=1+(depth_gain-1)×lgainm
过补正抑制处理部23通过针对超过增益1倍的补正成分，根据轮廓以及亮度信息进行加工，来抑制过补正。由此，能够抑制低亮度中的噪声的强调、抑制高亮度中的白之类、并且实现与细部／轮廓相应的强调量的调整。另外，也可以省略进深变换处理部20、滤波器处理部21以及补正量调整处理部22，从而过补正抑制处理部23对从进深信息提取部10输入的进深信息depth_org进行过补正抑制。此外，也可以省略滤波器处理部21以及补正量调整处理部22，从而过补正抑制处理部23对进深变换处理后的进深信息depth_exp进行过补正抑制。而且，也可以仅省略补正量调整处理部22，从而过补正抑制处理部23对进行了平滑滤波后的进深信息depth_lpf进行过补正抑制。
放大色抑制处理部24为了阻止放大色的影像的显现，增强对白、黄的进深强调的效果的抑制。另外，也可以省略进深变换处理部20、滤波器处理部21以及补正量调整处理部22，从而放大色抑制处理部24对从进深信息提取部10输入的进深信息depth_org进行放大色抑制。此外，也可以省略滤波器处理部21以及补正量调整处理部22，从而放大色抑制处理部24对进深变换处理后的进深信息depth_exp进行放大色抑制。而且，也可以仅省略补正量调整处理部22，从而放大色抑制处理部24对进行了平滑滤波后的进深信息depth_lpf进行放大色抑制。
图14是用于说明图7中的帧间处理部27的功能的图。帧间处理部27对于过补正抑制处理后或放大色抑制处理后的进深信息depth_lum，执行如下的轮廓补正量调整：若1帧内的进深信息的最小值depth_min与最大值depth_max的差较大则进行轮廓强调，若1帧内的进深信息的最小值depth_min与最大值depth_max的差较小则不进行轮廓强调。将增益设为fgain时，运算式如下：
depth_coef=1+(depth_lum-1)×fgain
在进深信息的动态范围较大的情况下，通过增大对轮廓补正的效果调整量，立体的影像能够更增加立体感。另外，也可以省略进深变换处理部20、滤波器处理部21、补正量调整处理部22、过补正抑制处理部23、放大色抑制处理部24、选择部25以及乘法部26，从而帧间处理部27对从进深信息提取部10输入的进深信息depth_org进行轮廓补正量调整。此外，也可以省略滤波器处理部21、补正量调整处理部22、过补正抑制处理部23、放大色抑制处理部24、选择部25以及乘法部26，从而帧间处理部27对进深变换处理后的进深信息depth_exp进行轮廓补正量调整。此外，也可以省略补正量调整处理部22、过补正抑制处理部23、放大色抑制处理部24、选择部25以及乘法部26，从而帧间处理部27对进行了平滑滤波后的进深信息depth_lpf进行轮廓补正量调整。而且，也可以省略过补正抑制处理部23、放大色抑制处理部24、选择部25以及乘法部26，从而帧间处理部27对补正量调整后的进深信息depth_gain进行轮廓补正量调整。
图15是表示图7中的补正量调整处理部22中的进深平均值depth_av与偏移量offset的关系的图。在1帧内的进深平均值depth_av较小的情况下，采用负的偏移量offset。相反地在1帧内的进深平均值depth_av较大的情况下，采用正的偏移量offset。
补正量调整处理部22根据进深平均值depth_av对补正量调整处理中的I_DEPSTL以及I_DEPSTH进行动态地变更，使得在进深平均值depth_av较小的情况下将图10所示的补正量调整的变换曲线向输入值较小的一侧移动，在进深平均值depth_av较大的情况下将图10所示的补正量调整的变换曲线向输入值较大的一侧移动。由此，即使在近前侧或纵深侧进深集中的情况下，也显出影像的进深感。
图16是用于说明进深平均值depth_av较小的情况下的图7中的补正量调整处理部22中的特性调整的图。根据图15采用负的偏移量offset的结果，在图10中说明的特性曲线向左移动。
图17是用于说明进深平均值depth_av较大的情况下的图7中的补正量调整处理部22中的特性调整的图。根据图15采用正的偏移量offset的结果是在图10中说明的特性曲线向右移动。
图18表示图7中的特征量提取部28的详细构成例。图18的特征量提取部28具备特征量计算部30、第1延迟1帧部31、平均值计算部32、2帧保持部33、IIR(Infinite-duration Impulse Response，无限长冲激响应)滤波器部34、选择部35、第2延迟1帧部36和判定部37。对于判定部37，输入1画面内的亮度平均值APL和使其延迟1帧而得到的值APL1f，并在APL与APL1f的差的绝对值大于阈值I_APLTH时将“1”提供给选择部35，否则将“0”提供给选择部35。选择部35分别在判定部37的输出是“1”时选择滤波器输入in，在判定部37的输出是“0”时选择滤波器输出out，并作为L图像和R图像共同的特征量而输出1帧内的进深平均值depth_av、进深最大值depth_max和进深最小值depth_min。
图19表示图18中的IIR滤波器部34的详细构成例。图19的IIR滤波器部34具备运算部40和延迟1帧部41。运算部40通过输入滤波器输入in、和使滤波器输出out延迟了1帧而得到的结果out_lf，并使用系数α执行两者的加权求和计算，来得到滤波器输出out。
图20是用于说明图18的特征量提取部28的功能的时序图。在图1的影像信号处理装置中的输出影像信号是3D影像信号的情况下，合成L图像和R图像，作为进深信息的平均值depth_av、最大值depth_max、最小值depth_min等的特征量在L图像和R图像使用相同值。
根据图18的构成，通过针对特征量进行IIR滤波，能够抑制特征量的变动，并抑制闪烁。另外，在图18的示例中，例如在通过1画面内的亮度平均值APL的差分值较大而探测到场景变化的发生的情况下，对IIR滤波器部34设立了旁路，但也可以基于亮度以外的信息对场景变化的发生进行探测。
工业实用性
如以上说明所示，本发明所涉及的影像信号处理装置能够获得最适于3D影像的进深强调的效果，因而非常有用。
符号说明
1  提取变换部
2  轮廓强调处理部
10  进深信息提取部
11  2D／3D变换部
12  补正系数计算部
13  选择部
14  HPF部
15  乘法部
16  加法部
17  3D／2D变换部
20  进深变换处理部
21  滤波器处理部
22  补正量调整处理部
23  过补正抑制处理部
24  放大色抑制处理部
25  选择部
26  乘法部
27  帧间处理部
28  特征量提取部
权利要求书(按照条约第19条的修改)
1.一种影像信号处理装置，其特征在于，具备：
进深信息提取单元，其根据输入影像信号计算出进深信息；
二维三维变换单元，其在所述输入影像信号是二维影像信号的情况下基于所述进深信息将该二维影像信号变换为三维影像信号即第1影像信号；
补正系数计算单元，其根据所述进深信息计算出补正系数，
选择单元，其选择所述输入影像信号和所述第1影像信号中的任何一者进行输出；和
强调处理单元，其对于所述选择单元的输出基于所述补正系数来进行强调处理并作为输出影像信号进行输出。
2.根据权利要求1所述的影像信号处理装置，其特征在于，
在所述输入影像信号是二维影像信号的情况下，所述选择单元选择所述第1影像信号，所述输出影像信号为三维影像。
3.根据权利要求1所述的影像信号处理装置，其特征在于，
在所述输入影像信号是二维影像信号的情况下，所述选择单元选择所述输入影像信号，所述输出影像信号为二维影像。
4.根据权利要求1所述的影像信号处理装置，其特征在于，
在所述输入影像信号是三维影像信号的情况下，所述选择单元选择所述输入影像信号，所述输出影像信号为三维影像。
5.根据权利要求4所述的影像信号处理装置，其特征在于，
在所述输入影像信号是三维影像信号的情况下，所述进深信息提取单元从所述输入影像信号的左右的2枚信号提取进深信息。
6.根据权利要求1所述的影像信号处理装置，其特征在于，
在所述输入影像信号是三维影像信号的情况下，所述选择单元选择所述输入影像信号，
还具备三维二维变换单元，其根据所述输出影像信号生成二维的第2影像信号。
7.根据权利要求1～6中任意一项所述的影像信号处理装置，其特征在于，
所述补正系数计算单元进行让所述进深信息的上限值与下限值的差变大那样的进深变换处理。
8.根据权利要求7所述的影像信号处理装置，其特征在于，
所述补正系数计算单元对于所述进深信息或所述进深变换处理后的进深信息中的任意一者进行平滑滤波。
9.根据权利要求8所述的影像信号处理装置，其特征在于，
所述补正系数计算单元对于所述进深信息或所述进深变换处理后的进深信息或进行了平滑滤波后的进深信息中的任意一者，在大于第1进深值并且小于第2进深值的情况下进行变换为固定值即第3进深值的补正量调整。
10.根据权利要求8所述的影像信号处理装置，其特征在于，
所述补正系数计算单元对于所述进深信息或所述进深变换处理后的进深信息或进行了平滑滤波后的进深信息中的任意一者，在所述进深信息的值比小于第1进深值的第4进深值还小的情况下进行变换为负的进深值的补正量调整。
11.根据权利要求9或10所述的影像信号处理装置，其特征在于，
所述补正系数计算单元对于所述进深信息或所述进深变换处理后的进深信息或进行了平滑滤波后的进深信息或补正量调整后的进深信息中的任意一者，在所述输入影像信号的亮度为第1亮度值以下或第2亮度值以上的情况下进行将所述进深信息的值补正得较小的过补正抑制处理。
12.根据权利要求9或10所述的影像信号处理装置，其特征在于，
所述补正系数计算单元对于所述进深信息或所述进深变换处理后的进深信息或进行了平滑滤波后的进深信息或补正量调整后的进深信息中的任意一者，在所述输入影像信号的亮度为第3亮度值以上的情况下进行抑制所述进深信息的值的放大色抑制处理。
13.根据权利要求11所述的影像信号处理装置，其特征在于，
所述补正系数计算单元对于所述进深信息或所述进深变换处理后的进深信息或进行了平滑滤波后的进深信息或补正量调整后的进深信息或过补正抑制处理后的进深信息中的任意一者，执行如下的轮廓补正量调整：若1帧内的进深信息的最小值与最大值的差较大则进行轮廓强调，若1帧内的进深信息的最小值与最大值的差较小则不进行轮廓强调。
14.根据权利要求12所述的影像信号处理装置，其特征在于，
所述补正系数计算单元对于所述进深信息或所述进深变换处理后的进深信息或进行了平滑滤波后的进深信息或补正量调整后的进深信息或放大色抑制处理后的进深信息中的任意一者，执行如下的轮廓补正量调整：若1帧内的进深信息的最小值与最大值的差较大则进行轮廓强调，若1帧内的进深信息的最小值与最大值的差较小则不进行轮廓强调。
15.根据权利要求9或10所述的影像信号处理装置，其特征在于，
所述补正系数计算单元在进深平均值较小的情况下将所述补正量调整的变换曲线向输入值较小的一侧移动，在进深平均值较大的情况下将所述补正量调整的变换曲线向输入值较大的一侧移动。
16.根据权利要求1～15中任意一项所述的影像信号处理装置，其特征在于，
在所述输出影像信号是三维影像信号的情况下，对进深信息的平均值、最大值、最小值等的特征量在左右使用相同值。

Claims (15)

1.一种影像信号处理装置，其特征在于，具备：
进深信息提取单元，其根据输入影像信号计算出进深信息；
二维三维变换单元，其在所述输入影像信号是二维影像信号的情况下基于所述进深信息将该二维影像信号变换为三维影像信号即第1影像信号；
补正系数计算单元，其根据所述进深信息计算出补正系数，
选择单元，其选择所述输入影像信号和所述第1影像信号中的任何一者进行输出；和
强调处理单元，其对于所述选择单元的输出基于所述补正系数来进行强调处理并作为输出影像信号进行输出。
2.根据权利要求1所述的影像信号处理装置，其特征在于，
在所述输入影像信号是二维影像信号的情况下，所述选择单元选择所述第1影像信号，所述输出影像信号为三维影像。
3.根据权利要求1所述的影像信号处理装置，其特征在于，
在所述输入影像信号是二维影像信号的情况下，所述选择单元选择所述输入影像信号，所述输出影像信号为二维影像。
4.根据权利要求1所述的影像信号处理装置，其特征在于，
在所述输入影像信号是三维影像信号的情况下，所述选择单元选择所述输入影像信号，所述输出影像信号为三维影像。
5.根据权利要求4所述的影像信号处理装置，其特征在于，
在所述输入影像信号是三维影像信号的情况下，所述进深信息提取单元从所述输入影像信号的左右的2枚信号提取进深信息。
6.根据权利要求1所述的影像信号处理装置，其特征在于，
在所述输入影像信号是三维影像信号的情况下，所述选择单元选择所述输入影像信号，
还具备三维二维变换单元，其根据所述输出影像信号生成二维的第2影像信号。
7.根据权利要求1～6中任意一项所述的影像信号处理装置，其特征在于，
所述补正系数计算单元进行让所述进深信息的上限值与下限值的差变大那样的进深变换处理。
8.根据权利要求1～7中任意一项所述的影像信号处理装置，其特征在于，
所述补正系数计算单元对于所述进深信息或所述进深变换处理后的进深信息中的任意一者进行平滑滤波。
9.根据权利要求1～8中任意一项所述的影像信号处理装置，其特征在于，
所述补正系数计算单元对于所述进深信息或所述进深变换处理后的进深信息或进行了平滑滤波后的进深信息中的任意一者，在大于第1进深值并且小于第2进深值的情况下进行变换为固定值即第3进深值的补正量调整。
10.根据权利要求1～9中任意一项所述的影像信号处理装置，其特征在于，
所述补正系数计算单元对于所述进深信息或所述进深变换处理后的进深信息或进行了平滑滤波后的进深信息中的任意一者，在所述进深信息的值比小于第1进深值的第4进深值还小的情况下进行变换为负的进深值的补正量调整。
11.根据权利要求1～10中任意一项所述的影像信号处理装置，其特征在于，
所述补正系数计算单元对于所述进深信息或所述进深变换处理后的进深信息或进行了平滑滤波后的进深信息或补正量调整后的进深信息中的任意一者，在所述输入影像信号的亮度为第1亮度值以下或第2亮度值以上的情况下进行将所述进深信息的值补正得较小的过补正抑制处理。
12.根据权利要求1～10中任意一项所述的影像信号处理装置，其特征在于，
所述补正系数计算单元对于所述进深信息或所述进深变换处理后的进深信息或进行了平滑滤波后的进深信息或补正量调整后的进深信息中的任意一者，在所述输入影像信号的亮度为第3亮度值以上的情况下进行抑制所述进深信息的值的放大色抑制处理。
13.根据权利要求1～12中任意一项所述的影像信号处理装置，其特征在于，
所述补正系数计算单元对于所述进深信息或所述进深变换处理后的进深信息或进行了平滑滤波后的进深信息或补正量调整后的进深信息或过补正抑制处理后的进深信息或放大色抑制处理后的进深信息中的任意一者，执行如下的轮廓补正量调整：若1帧内的进深信息的最小值与最大值的差较大则进行轮廓强调，若1帧内的进深信息的最小值与最大值的差较小则不进行轮廓强调。
14.根据权利要求9或10所述的影像信号处理装置，其特征在于，
所述补正系数计算单元在进深平均值较小的情况下将所述补正量调整的变换曲线向输入值较小的一侧移动，在进深平均值较大的情况下将所述补正量调整的变换曲线向输入值较大的一侧移动。
15.根据权利要求1～14中任意一项所述的影像信号处理装置，其特征在于，
在所述输出影像信号是三维影像信号的情况下，对进深信息的平均值、最大值、最小值等的特征量在左右使用相同值。
CN201280050459.1A 2011-10-14 2012-05-16 影像信号处理装置 Pending CN103875244A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2011-227041 2011-10-14
JP2011227041 2011-10-14
PCT/JP2012/003195 WO2013054454A1 (ja) 2011-10-14 2012-05-16 映像信号処理装置

Publications (1)

Publication Number Publication Date
CN103875244A true CN103875244A (zh) 2014-06-18

Family

ID=48081526

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280050459.1A Pending CN103875244A (zh) 2011-10-14 2012-05-16 影像信号处理装置

Country Status (4)

Country Link
US (1) US9386291B2 (zh)
JP (1) JPWO2013054454A1 (zh)
CN (1) CN103875244A (zh)
WO (1) WO2013054454A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20220215566A1 (en) * 2021-01-07 2022-07-07 Electronics And Telecommunications Research Institute Method of piecewise linear scaling of geometry atlas and apparatus using the same

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9053562B1 (en) 2010-06-24 2015-06-09 Gregory S. Rabin Two dimensional to three dimensional moving image converter
US9992021B1 (en) 2013-03-14 2018-06-05 GoTenna, Inc. System and method for private and point-to-point communication between computing devices
CN105635611A (zh) * 2014-11-03 2016-06-01 中兴通讯股份有限公司 投影仪自适应调整方法及装置
JP6158779B2 (ja) * 2014-12-08 2017-07-05 株式会社Ｓｏｋｅｎ 画像処理装置
US11109010B2 (en) * 2019-06-28 2021-08-31 The United States of America As Represented By The Director Of The National Geospatial-Intelligence Agency Automatic system for production-grade stereo image enhancements

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3235776B2 (ja) * 1996-08-07 2001-12-04 三洋電機株式会社 立体感調整方法および立体感調整装置
KR100445619B1 (ko) 1996-07-18 2004-08-25 산요덴키가부시키가이샤 2차원 영상을 3차원 영상으로 변환하는 장치 및 방법
JPH11127456A (ja) * 1997-10-23 1999-05-11 Sony Corp 映像表示装置および方法
JP2007264722A (ja) 2006-03-27 2007-10-11 Victor Co Of Japan Ltd 画像処理装置
US7869649B2 (en) 2006-05-08 2011-01-11 Panasonic Corporation Image processing device, image processing method, program, storage medium and integrated circuit
JP5121294B2 (ja) * 2006-05-08 2013-01-16 パナソニック株式会社 画像処理方法、画像処理装置、プログラム、記録媒体および集積回路
JP2008021163A (ja) 2006-07-13 2008-01-31 Matsushita Electric Ind Co Ltd 画像処理装置
KR20100135032A (ko) * 2009-06-16 2010-12-24 삼성전자주식회사 2차원 영상의 3차원 영상 변환 장치 및 방법
US8508580B2 (en) * 2009-07-31 2013-08-13 3Dmedia Corporation Methods, systems, and computer-readable storage media for creating three-dimensional (3D) images of a scene
US8718356B2 (en) * 2010-08-23 2014-05-06 Texas Instruments Incorporated Method and apparatus for 2D to 3D conversion using scene classification and face detection
GB2489931A (en) * 2011-04-08 2012-10-17 Sony Corp Analysis of 3D video to detect frame violation within cropped images

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20220215566A1 (en) * 2021-01-07 2022-07-07 Electronics And Telecommunications Research Institute Method of piecewise linear scaling of geometry atlas and apparatus using the same

Also Published As

Publication number Publication date
JPWO2013054454A1 (ja) 2015-03-30
WO2013054454A1 (ja) 2013-04-18
US9386291B2 (en) 2016-07-05
US20140184738A1 (en) 2014-07-03

Similar Documents

Publication Publication Date Title
CN103875244A (zh) 影像信号处理装置
CN105335933B (zh) 一种图像对比度增强方法和装置
KR101198320B1 (ko) 2차원에서 3차원으로의 영상 변환 방법 및 장치
JP2014072639A (ja) 画像処理装置、画像処理方法及び画像処理プログラム
CN102404594B (zh) 基于图像边缘信息的2d转3d的方法
WO2017001227A1 (en) Method for signal processing
WO2013067441A1 (en) Depth-map generation for an input image using an example approximate depth-map associated with an example similar image
US6909813B2 (en) Contour correcting circuit and contour correcting method
US8406559B2 (en) Method and system for enhancing image sharpness based on local features of image
KR20130137000A (ko) 화상 처리 장치 및 화상 처리 방법, 및 프로그램
TWI498852B (zh) 深度圖產生裝置及其方法
Hegde et al. Adaptive cubic spline interpolation in cielab color space for underwater image enhancement
WO2014175729A1 (en) Image color correction
TWI608447B (zh) 立體影像深度圖產生裝置及方法
CN102496138A (zh) 一种二维图像转换为三维图像的方法
CN103310446B (zh) 一种基于迭代指导滤波的立体匹配方法
CN103455974B (zh) 一种图像素描风格化的处理方法
US10250814B2 (en) Image signal processor apparatus and image signal processing method
US10165247B2 (en) Image device with image defocus function and method generating a defocus image thereof
JPH1051811A (ja) 立体感調整方法および立体感調整装置
CN111429381A (zh) 图像边缘增强方法及装置、存储介质、计算机设备
CN108174056A (zh) 一种时空域联合的微光视频降噪方法
Hsieh et al. Single image haze removal with pixel-based transmission map estimation
Okado et al. Fast and high-quality regional histogram equalization
TWI520565B (zh) 圖像處理方法以及圖像處理裝置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20140618