CN102342122A - 影像信号处理装置和影像信号处理方法 - Google Patents

影像信号处理装置和影像信号处理方法 Download PDF

Info

Publication number
CN102342122A
CN102342122A CN2010800099765A CN201080009976A CN102342122A CN 102342122 A CN102342122 A CN 102342122A CN 2010800099765 A CN2010800099765 A CN 2010800099765A CN 201080009976 A CN201080009976 A CN 201080009976A CN 102342122 A CN102342122 A CN 102342122A
Authority
CN
China
Prior art keywords
image
left eye
right eye
information
signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2010800099765A
Other languages
English (en)
Inventor
中村每良
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN102342122A publication Critical patent/CN102342122A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/139—Format conversion, e.g. of frame-rate or size

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Television Systems (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本发明提供一种能够抑制处理量的增大的影像信号处理装置。该影像信号处理装置(100)对包含左眼用图像和右眼用图像的三维影像信号进行处理，该影像信号处理装置(100)具备：作为信息获取部的一例的膜检测部(310)，从左眼用图像和右眼用图像的一方中获取进行预定处理时所用的信息；以及作为图像处理部的一例的IP变换部(320)，使用信息获取部所获取的信息对左眼用图像和右眼用图像的双方进行所述预定处理。

Description

影像信号处理装置和影像信号处理方法
技术领域
本发明涉及影像信号处理装置，尤其涉及对三维影像信号进行处理的影像信号处理装置。
背景技术
以往，为了显示使视听者立体感受的三维影像，已知有对包含左眼用图像和右眼用图像的三维影像信号进行处理的影像信号处理装置(例如参照专利文献1)。左眼用图像和右眼用图像是相互具有视差、例如由配置在不同位置的2台照相机生成的图像。
影像信号处理装置例如对所输入的三维影像信号进行格式变换处理。格式变换处理例如是帧频的变换处理、图像尺寸的变换处理以及扫描方式的变换处理等。影像信号处理装置将进行了格式变换处理的三维影像信号输出给三维影像显示装置。
三维影像显示装置通过按照预定的方式显示左眼用图像和右眼用图像来显示使视听者立体感受的三维影像。例如，三维影像显示装置按照每1帧交替显示左眼用图像和右眼用图像。
现有技术文献
专利文献
【专利文献1】日本特开平4-241593号公报
发明内容
发明要解决的课题
然而，上述以往技术具有三维影像信号的处理所涉及的处理量增大的课题。
为了按照与二维影像相同的画质和相同的帧频来显示三维影像，需要二维影像2倍的处理。这是因为：在三维影像中，1帧的三维图像由左眼用图像和右眼用图像这2个二维图像构成。因此，影像信号处理装置必须处理2个二维图像，处理量增大。
因此，本发明是为了解决上述课题而进行的，其目的在于提供一种能够抑制处理量增大的影像信号处理装置和影像信号处理方法。
用于解决课题的手段
为了达成上述目的，本发明的影像信号处理装置对包含左眼用图像和右眼用图像的三维影像信号进行处理，其中，所述影像信号处理装置具备：信息获取部，从所述左眼用图像和所述右眼用图像的一方中获取进行预定处理时所用的信息；以及图像处理部，使用所述信息获取部所获取的信息对所述左眼用图像和所述右眼用图像的双方进行所述预定处理。
由此，通过将从左眼用图像和右眼用图像的任意一方中获取的信息用于左眼用图像和右眼用图像的双方的处理，能够避免处理的重复，能够抑制处理量的增大。由于左眼用图像和右眼用图像通常是从不同视点拍摄同一被摄体所获得的图像，所以在分别对左眼用图像和右眼用图像进行了预定处理的情况下，处理结果大多数情况下是相同的，因此能够共用结果。
并且，所述信息获取部可以通过对所述左眼用图像和所述右眼用图像的一方进行膜检测来获取膜信息，该膜信息表示所述三维影像信号是否是根据膜影像生成的影像信号。
由此，膜检测的结果能够在左眼用图像和右眼用图像中共用。膜检测是图像的特征检测处理的一例，是检测三维影像信号是否是根据膜影像生成的影像信号的处理。通过进行膜检测，通常在左眼用图像和右眼用图像中获得同一检测结果。因此，通过共用膜检测的结果，能够避免处理的重复，能够抑制处理量的增大。
并且，在所述三维影像信号是根据膜影像生成的影像信号的情况下，所述信息获取部还可以获取图片信息，该图片信息表示根据所述膜影像所包含的多个帧中的同一帧生成的图片，在所述膜信息表示所述三维影像信号是根据膜影像生成的影像信号的情况下，所述图像处理部使用所述图片信息分别对所述左眼用图像和所述右眼用图像的双方进行扫描方式的变换和帧频的变换中的至少一方，来作为所述预定处理。
由此，在对根据膜影像生成的影像信号进行扫描方式的变换或帧频的变换时，能够抑制处理量的增大。
并且，所述信息获取部可以通过检测所述左眼用图像和所述右眼用图像的一方中是否包含亮度值恒定的特定图像，来获取表示包含有该特定图像的区域的特定图像信息。
由此，特定图像的检测结果能够在左眼用图像和右眼用图像中共用。特定图像例如是亮度值恒定的图像，是以纵横比的调整等为目的附加在本来图像上的图像。由于在左眼用图像和右眼用图像中通常附加在相同的区域，所以只要从左眼用图像和右眼用图像的任意一方中检测特定图像即可，能够避免处理的重复。
并且，所述信息获取部可以通过对所述左眼用图像和所述右眼用图像的一方检测图像左侧和右侧是否包含所述特定图像来获取所述特定图像信息。
由此，能够检测所谓的侧边(左右黑边(Pillar box))。
并且，所述信息获取部可以通过对所述左眼用图像和所述右眼用图像的一方检测图像上侧和下侧是否包含所述特定图像来获取所述特定图像信息。
由此，能够检测所谓的上下黑边(letter box)。
所述图像处理部可以对所述左眼用图像和所述右眼用图像的双方分别计算所述特定图像信息表示的区域以外的有效图像区域的平均亮度值。
由此，通过计算特定图像的区域以外的有效图像区域的平均亮度值，能够算出本来图像的平均亮度值。这是因为由于所检测出的特定图像不是本来图像，所以在计算出图像的所有区域的平均亮度值的情况下，计算了与本来图像的平均亮度值不同的值。
并且，所述影像信号处理装置还可以具备分割部，该分割部将所述三维影像信号分割成所述左眼用图像和所述右眼用图像，所述图像处理部具有：左眼用图像处理部，对所述左眼用图像进行所述预定处理；以及右眼用图像处理部，对所述右眼用图像进行所述预定处理，所述信息获取部从所述分割部所分割的所述左眼用图像和所述右眼用图像的一方中获取所述信息，并将所获取的信息输出给所述左眼用图像处理部和所述右眼用图像处理部。
由此，由于能够通过并列处理对左眼用图像和右眼用图像进行处理，所以能够使处理速度提高。
另外，本发明不仅能够实现为上述的影像信号处理装置，也可以实现为将构成该影像信号处理装置的处理部作为步骤的方法。并且，还可以实现为使计算机执行这些步骤的程序。另外，还可以实现为记录了该程序的计算机能够读取的CD-ROM(Compact Disc-Read Memory：光盘只读存储器)等记录介质以及表示该程序的信息、数据或信号。并且，也可以经由互联网等通信网络发送这些程序、信息、数据和信号。
构成上述的各影像信号处理装置的构成要素的一部分或全部可以由1个系统LSI(Large Scale integration：大规模集成电路)构成。系统LSI是将多个构成部集成在1个芯片上制造而成的超多功能LSI，具体来讲，是构成为包含微处理器、ROM、RAM(Random Access Memory：随机存取存储器)等的计算机系统。
发明效果
根据本发明所涉及的影像信号处理装置和影像信号处理方法，能够抑制处理量的增大。
附图说明
图1是表示包含实施方式1所涉及的影像信号处理装置的影像信号处理系统的结构的框图。
图2A是表示实施方式1所涉及的三维影像信号的配置图形的一例的图。
图2B是表示实施方式1所涉及的三维影像信号的配置图形的一例的图。
图3是表示实施方式1所涉及的影像信号处理装置的结构的框图。
图4是表示实施方式1所涉及的影像信号处理装置的动作的一例的流程图。
图5是表示实施方式1所涉及的影像信号处理装置的三维影像信号的流程的一例的图。
图6是表示实施方式1所涉及的交换处理部的结构的一例的框图。
图7是表示实施方式1所涉及的交换处理部的动作的一例的流程图。
图8是表示膜影像与输入三维影像信号的一例的图。
图9是表示实施方式1所涉及的IP变换部将60i的影像IP变换为60p的影像时的处理例的图。
图10A是表示实施方式2所涉及的输入选择部的结构的一例的框图。
图10B是表示实施方式2所涉及的输入选择部的结构的另一例的框图。
图11A是表示侧边图像的一例的图。
图11B是表示上下黑边图像的一例的图。
图12是表示实施方式2所涉及的输入选择部的动作的一例的图。
图13是表示具备本发明所涉及的影像信号处理装置的数字录像机和数字电视机的一例的外观图。
具体实施方式
以下，根据实施方式，一边参照附图一边对本发明所涉及的影像信号处理装置和影像信号处理方法进行详细说明。
(实施方式1)
实施方式1所涉及的影像信号处理装置对包含左眼用图像和右眼用图像的三维影像信号进行处理，其特征在于，该影像信号处理装置具有：信息获取部，从左眼用图像和右眼用图像的一方中获取进行预定处理时使用的信息；以及图像处理部，使用信息获取部获取的信息，对左眼用图像和右眼用图像的双方进行上述预定的处理。更具体来讲，在本实施方式中，信息获取部进行作为图像特征量检测处理的一例的膜检测，并且使用该检测结果，对包含左眼用图像的左眼用影像数据和包含右眼用图像的右眼用影像数据的双方分别进行扫描方式的变换或帧频的变换。
首先，对包含实施方式1所涉及的影像信号处理装置的影像信号处理系统的结构进行说明。
图1是表示包含实施方式1所涉及的影像信号处理装置100的影像信号处理系统10的结构的框图。
图1所示的影像信号处理系统10具备数据录像机20、数据电视机30以及快门眼镜40。并且，数字录像机20和数据电视机30通过HDMI(HighDefinition Multimedia Interface：高清晰多媒体接口)电缆41来进行连接。
数字录像机20对记录在记录介质42中的三维影像信号的格式进行变换，并将变换后的三维影像信号经由HDMI电缆41输出给数字电视机30。另外，记录介质42例如是BD(Blu-ray Disc：蓝光盘)等光盘、HDD(Hard Disk Drive：硬盘驱动器)等磁盘或者非易失性存储器等。
数字电视机30对从数字录像机20经由HDMI电缆41输入的三维影像信号或包含在广播波43中的三维影像信号的格式进行变换，并对变换后的三维影像信号中包含的三维影像进行显示。另外，广播波43例如是地上数字电视广播和卫星数字电视广播等。
快门眼镜40是为了观看三维影像而由视听者佩戴的眼镜，例如是液晶快门眼镜。快门眼镜40具备左眼用液晶快门和右眼用液晶快门，能够与数字电视机30显示的影像同步地控制快门的开闭。
另外，数字录像机20可以对广播波43所包含的三维影像信号或者经由因特网等通信网获取的三维影像信号的格式进行变换。并且，数字录像机20可以对从外部装置经由外部输入端子(未图示)输入的三维影像信号的格式进行变换。
同样，数字电视机30可以对记录在记录介质42中的三维影像信号的格式进行变换。并且，数字电视机30也可以对从数字录像机20以外的外部装置经由外部输入端子(未图示)输入的三维影像信号的格式进行变换。
并且，数字录像机20和数字电视机30可以通过HDMI电缆41以外的规格的电缆来连接，或者还可以通过无线通信网来连接。
以下，对数字录像机20和数字电视机30的详细结构进行说明。首先，对数字录像机20进行说明。
如图1所示，数字录像机20具备输入部21、解码器22、影像信号处理装置100和HDMI通信部23。
输入部21获取记录在记录介质42中的三维影像信号51。三维影像信号51包含有例如根据MPEG-4AVC/H.264等标准被压缩编码的编码三维影像。
解码器22通过对输入部21所获取的三维影像信号51进行解码来生成输入三维影像信号52。
影像信号处理装置100通过对解码器22所生成的输入三维影像信号52进行处理来生成输出三维影像信号53。影像信号处理装置100的详细结构和动作将在后面进行说明。
HDMI通信部23将影像信号处理装置100所生成的输出三维影像信号53经由HDMI电缆41输出给数字电视机30。
另外，数字录像机20可以将所生成的输出三维影像信号存储在该数字录像机20所具备的存储部(HDD和非易失性存储器等)中。或者，也可以记录在相对于该数字录像机20可拆装的记录介质(光盘等)中。
并且，数字录像机20在通过HDMI电缆41以外的单元与数字电视机30连接的情况下，可以代替HDMI通信部23而具备与该单元对应的通信部。例如，在连接单元是无线通信网的情况下，数字录像机20具备无线通信部，在连接单元是依据其他规格的电缆的情况下，数字录像机20具备与该规格对应的通信部。另外，数字录像机20也可以具备这些多个通信部，并切换利用多个通信部。
接着，对数字电视机30进行说明。
如图1所述，数字电视机30具备输入部31、解码部32、HDMI通信部33、影像信号处理装置100、显示面板34和发射机35。
输入部31获取包含在广播波43中的三维影像信号54。三维影像信号54包含例如根据MPEG-4AVC/H.264等规格而压缩编码的编码三维影像。
解码部32通过对输入部31所获取的三维影像信号54进行解码，生成输入三维影像信号55。
HDMI通信部33获取从数字录像机20的HDMI通信部23输出的输出三维影像信号53，并作为输入三维影像信号56输出给影像信号处理装置100。
影像信号处理装置100通过对输入三维影像信号55和56进行处理，生成输出三维影像信号57。关于影像信号处理装置100的详细结构和动作，将在后面说明。
显示面板34显示输出三维影像信号57所包含的三维影像。
发射机35使用无线通信来控制快门眼镜40的快门的开闭。
另外，数字电视机30与数字录像机20同样，在通过HDMI电缆41以外的单元与数字录像机20连接的情况下，也可以具备与该单元对应的通信部来代替HDMI通信部33。
这里，对显示面板34显示的三维影像进行说明，并对取得显示面板34与快门眼镜40的同步的方法进行说明。
三维影像包含相互具有视差的左眼图像和右眼用图像。通过选择性地分别将左眼用图像入射到视听者的左眼、将右眼用图像入射到视听者的右眼，能够使视听者立体感受到影像。
图2A示出数字电视机30具备的影像信号处理装置100所生成的输出三维影像信号57的一例。另外，图2A是表示实施方式1所涉及的三维影像信号的配置图形的一例的图。
图2A所示的输出三维影像信号57按照每1帧交替包含左眼用图像57L和右眼用图像57R。例如，输出三维影像信号57的帧频是120fps，扫描方式是逐行方式。另外，将这种影像信号也记载为120p的影像信号。
显示面板34接收图2A所示的输出三维影像信号57，按照每1帧交替显示左眼用图像57L和右眼用图像57R。此时，发射机35在显示面板34显示左眼用图像57L的期间，对快门眼镜40进行打开快门眼镜40的左眼用液晶快门、并且关闭右眼用液晶快门的控制。并且，发射机35在显示面板34显示右眼用图像57R的期间，对快门眼镜40进行打开快门眼镜40的右眼用液晶快门、并且关闭左眼用液晶快门的控制。由此，选择性地分别将左眼用图像57L入射到视听者的左眼、将右眼用图像57R入射到视听者的右眼。
这样，显示面板34在时间上切换显示左眼用图像57L和右眼用图像57R。另外，在图2A所示的例子中，按照每1帧切换左眼用图像57L和右眼用图像57R，但也可以按照多个帧来进行切换。
另外，选择性地分别向视听者的左眼和右眼入射左眼用图像和右眼用图像的方法不限于上述方法，也可以使用其他方法。
例如，数字电视机30具备的影像信号处理装置100可以生成图2B所示的输出三维影像信号58。所生成的输出三维影像信号58输出给显示面板34。另外，图2B是表示实施方式1所涉及的三维影像信号的配置图形的一例的图。
例如，图2B所示的输出三维影像信号58将左眼用图像58L和右眼用图像58R包含在1个帧内的不同区域。具体来讲，左眼用图像58L和右眼用图像58R被配置成棋盘状。例如，输出三维影像信号58的帧频是60fps，扫描方式是逐行方式。另外，将这种影像信号也记载为60p的影像信号。
显示面板34接收图2B所示的输出三维影像信号58，并显示将左眼用图像58L和右眼用图像58R配置成棋盘状的图像。在该情况下，显示面板34具备形成在显示左眼用图像58L的像素上的左眼用偏光膜和形成在显示右眼用图像58R的像素上的右眼用偏光膜。由此，对左眼用图像58L和右眼用图像58R施加相互不同的偏光(直线偏光或圆偏光等)。
另外，视听者可以代替快门眼镜40而佩戴偏光眼镜，该偏光眼镜具备分别与显示面板34具备的偏光对应的左眼用偏光膜和右眼用偏光膜。由此，能够选择性地分别向视听者的左眼和右眼入射左眼用图像58L和右眼用图像58R。
这样，显示面板34显示将左眼用图像58L和右眼用图像58R配置于1帧内在空间上不同区域的影像。另外，在图2B所示的例子中，按照每1像素配置了左眼用图像58L和右眼用图像58R，但也可以按照多个像素配置左眼用图像58L和右眼用图像58R。并且，也可以不是棋盘状，而按照每条水平线或者每条垂直线配置左眼用图像58L和右眼用图像58R。
以下，对实施方式1所涉及的影像信号处理装置100的详细结构和动作进行说明。
实施方式1所涉及的影像信号处理装置100对包含左眼用图像和右眼用图像的三维影像信号进行处理。具体来讲，影像信号处理装置100对所输入的三维影像信号进行格式变换处理。例如，数字录像机20具备的影像信号处理装置100将第1格式的输入三维影像信号52变换为第2格式的输出三维影像信号53。
这里，影像信号处理装置100进行的格式变换处理是配置图形、帧频、扫描方式以及图像尺寸的变换中的至少1个的处理。另外，影像信号处理装置100也可以进行这些处理以外的处理。
配置图形的变换是对包含在三维影像信号中的左眼用图像和右眼用图像的时间上的配置或空间上的配置进行变换。例如，影像信号处理装置100将图2A所示的三维影像信号变换为图2B所示的三维影像信号。
帧频的变换是对三维影像信号的帧频进行变换。例如，影像信号处理装置100通过进行帧插值或帧复制处理，将低帧频(例如60fps)的三维影像信号变换为高帧频(例如120fps)的三维影像信号。或者，影像信号处理装置100通过对帧进行间除或者生成在时间上对多个帧进行了平均的帧，将高帧频的三维影像信号变换为低帧频的三维影像信号。
扫描方式的变换是从隔行方式向逐行方式的变换、或者从逐行方式向隔行方式的变换。另外，隔行方式是指将帧分成由第奇数线构成的顶场和由第偶数线构成的底场来进行扫描的方式。
图像尺寸的变换是进行图像的放大和缩小。例如，影像信号处理装置100通过进行像素的插值或复制来放大图像。或者，影像信号处理装置100通过间除像素或计算多个像素的平均值来缩小图像。例如，像素尺寸具有VGA(640×480)、高清晰电视图像(1280×720)以及全格码高清晰电视图像(1920×1080)等。
图3是表示实施方式1所涉及的影像信号处理装置100的结构的框图。
图3所示的影像信号处理装置100具备输入选择部110、第1处理部120、第2处理部130、合成部140。
输入选择部110将输入三维影像信号分割成左眼用图像210L和右眼用图像210R，将左眼用图像210L输出给第1处理部120，将右眼用图像210R输出给第2处理部130。具体来讲，输入选择部110将输入三维影像信号分割成只包含左眼用图像和右眼用图像中的左眼用图像的左眼用影像数据和只包含右眼用图像的右眼用图像数据。并且，输入选择部110将左眼用影像数据输出给第1处理部120，将右眼用影像数据输出给第2处理部130。另外，输入选择部110也可以将输入三维影像信号分别输出给第1处理部120和第2处理部130，由第1处理部120提取左眼用影像数据，由第2处理部130提取右眼用影像数据。
第1处理部120对输入选择部110所输入左眼用影像数据进行处理。具体来讲，第1处理部120进行左眼用影像数据的格式变换。此时，第1处理部120从左眼用影像数据获取进行预定处理时使用的信息，并将所获取的信息输出给第2处理部130。例如，第1处理部120通过对所输入的左眼用影像数据进行图像特征检测处理，获取预定信息作为特征检测结果。图像特征检测处理例如是膜检测。膜检测的详细情况将在后面进行说明。
第2处理部130对输入选择部110所输入右眼用影像数据进行处理。具体来讲，第2处理部130进行右眼用影像数据的格式变换。此时，第2处理部130接收第1处理部120从左眼用影像数据获取的信息。并且，第2处理部130利用所接收的信息对右眼用影像数据进行预定处理。
合成部140通过对第1处理部120所生成的变换后的左眼用图像250L和第2处理部130所生成的变换后的右眼用图像250R进行合成，生成合成图像260。包含所生成的合成图像260的影像信号作为输出三维影像信号被输出。
第1处理部120的详细结构如下所述。
如图3所示，第1处理部120具备第1水平尺寸调整部121、变换处理部122、垂直尺寸调整部123、第2水平尺寸调整部124。
第1水平尺寸调整部121对所输入的左眼用图像210L的水平方向的图像尺寸进行尺寸调整、即放大或缩小。例如，第1水平尺寸调整部121通过间除像素或计算多个像素的平均值，在水平方向上缩小左眼用图像210L。将缩小后的左眼用图像220L输出给变换处理部122。
变换处理部122对所输入的缩小后的左眼用图像220L进行IP变换。IP变换是扫描方式的变换的一例，是将缩小后的左眼用图像220L的扫描方式从隔行方式变换为逐行方式。将IP变换后的左眼用图像230L输出给垂直尺寸调整部123。
另外，变换处理部122从左眼用图像220L中获取预定处理所用的信息，将其输出给第2处理部130。并且，变换处理部122也可以进行降噪处理(NR处理)。关于变换处理部122的详细结构和动作，后面使用图4进行说明。并且，关于上述的预定处理和该处理所用的信息也在后面进行说明。
垂直尺寸调整部123对变换处理部122进行了IP变换后的左眼用图像230L的垂直方向的图像尺寸进行尺寸调整、即放大或缩小。将尺寸调整后的左眼用图像240L输出给第2水平尺寸调整部124。
第2水平尺寸调整部124对尺寸调整后的左眼用图像240L的水平方向的图像尺寸进行尺寸调整、即放大或缩小。例如，第2水平尺寸调整部124通过对像素进行插值或者复制，在水平方向上放大尺寸调整后的左眼用图像240L。将放大后的左眼用图像250L输出给合成部140。
并且，第2处理部130的详细结构如下所述。
如图3所示，第2处理部130具备第1水平尺寸调整部131、变换处理部132、垂直尺寸调整部133、第2水平尺寸调整部134。
第1水平尺寸调整部131对所输入的右眼用图像210R的水平方向的图像尺寸进行尺寸调整、即放大或缩小。例如，第1水平尺寸调整部131通过间除像素或计算多个像素的平均值，在水平方向上缩小右眼用图像210R。将缩小后的右眼用图像220R输出给变换处理部132。
变换处理部132对所输入的缩小后的右眼用图像220R进行IP变换。IP变换是将缩小后的右眼用图像220R的扫描方式从隔行方式变换为逐行方式。将IP变换后的右眼用图像230R输出给垂直尺寸调整部133。
另外，变换处理部132从第1处理部120的变换处理部122中获取预定处理所用的信息。并且，变换处理部132也可以进行降噪处理(NR处理)。
垂直尺寸调整部133对变换处理部132进行了IP变换后的右眼用图像230R的垂直方向的图像尺寸进行尺寸调整、即放大或缩小。将尺寸调整后的右眼用图像240R输出给第2水平尺寸调整部134。
第2水平尺寸调整部134对尺寸调整后的右眼用图像240R的水平方向的图像尺寸进行尺寸调整、即放大或缩小。例如，第2水平尺寸调整部134通过对像素进行插值或者复制，在水平方向上放大尺寸调整后的右眼用图像240R。将放大后的右眼用图像250R输出给合成部140。
另外，输入选择部110也可以将左眼用图像210L输出给第2处理部130、将右眼用图像210R输出给第1处理部120。并且，在输入了只表示左眼用图像的左眼用影像信号和只表示右眼用图像的右眼用影像信号这2个影像信号作为输入三维影像信号的情况下，输入选择部110可以不进行分割处理，而将左眼用影像信号输出给第1处理部120、将右眼用影像信号输出给第2处理部130。
如上所述，实施方式1所涉及的影像信号处理装置100从左眼用图像和右眼用图像中的任意一方中获取信息，并使用所获取的信息对左眼用图像和右眼用图像的双方进行处理。
接着，使用图4和图5对上述的影像信号处理装置100进行的处理进行说明。另外，图4是表示实施方式1所涉及的影像信号处理装置100的动作的一例的流程图。图5是实施方式1所涉及的影像信号处理装置100进行的三维影像信号的流程的一例的图。
以下，对数字录像机20具备的影像信号处理装置100的动作进行说明。另外，对数字电视机30具备的影像信号处理装置100的动作也是同样的。
首先，输入选择部110将输入三维影像信号52分割成左眼用图像210和右眼用图像210R(S110)。另外，实施方式1所涉及的输入三维影像信号52是隔行方式的影像信号，例如是全格码高清晰电视影像。
因此，如图5所示，左眼用图像210L包含左眼用顶场210Lt和左眼用底场210Lb。同样地，右眼用图像210R包含右眼用顶场210Rt和右眼用底场210Rb。各场由1920×540像素构成。
接着，第1水平尺寸调整部121和131分别在水平方向上缩小左眼用图像210L和右眼用图像210R(S120)。这里，第1水平尺寸调整部121和131在水平方向上缩小为1/2倍。由此，如图5所示，生成缩小后的左眼用图像220L和缩小后的右眼用图像220R。另外，缩小率不限于1/2倍。另外，第1水平尺寸调整部121和131也可以在水平方向上分别放大左眼用图像210L和右眼用图像210R。
缩小后的左眼用图像220L包含缩小后的左眼用顶场220Lt和缩小后的左眼用底场220Lb。缩小后的右眼用图像220R包含缩小后的右眼用顶场220Rt和缩小后的右眼用底场220Rb。各场由960×540像素构成。
另外，此时，第1水平尺寸调整部121和131为了生成图2B所示的棋盘状的图像，可以分别错开开始位置。具体来讲，第1水平尺寸调整部121通过提取包含在左眼用顶场210Lt中的第偶数像素(0、2、4、6…)，生成缩小后的左眼用顶场220Lt。另外，第1水平尺寸调整部121通过提取包含在左眼用底场210Lb中的第奇数像素(1、3、5、7…)，生成缩小后的左眼用底场220Lb。
并且，第1水平尺寸调整部131通过提取包含在右眼用顶场210Rt中的第奇数像素(1、3、5、7…)，生成缩小后的右眼用顶场220Rt。另外，第1水平尺寸调整部131通过提取包含在右眼用底场210Rb中的第偶数像素(0、2、4、6…)，生成缩小后的右眼用底场220Rb。
接着，变换处理部122和变换处理部132分别对缩小后的左眼用图像220L和缩小后的右眼用图像220R进行IP变换(S130)。变换处理部122和变换处理部132分别通过进行IP变换，生成逐行方式的左眼用图像230L和右眼用图像230R。另外，关于IP变换的详细情况将在后面说明。
接着，垂直尺寸调整部123和133在垂直方向上对左眼用图像230L和右眼用图像230R进行尺寸调整、即进行放大或缩小(S140)。在图5所示的例子中，垂直尺寸调整部123和133不进行垂直方向的尺寸调整就输出左眼用图像240L和右眼用图像240R。
接着，第2水平尺寸调整部124和134在水平方向上放大左眼用图像240L和右眼用图像240R(S150)。例如，第2水平尺寸调整部124通过复制包含在左眼用图像240L中的各像素，生成放大为2倍的左眼用图像250L。同样，第2水平尺寸调整部134通过复制包含在右眼用图像240R中的各像素，生成放大为2倍的右眼用图像250R。
另外，放大率例如是第1水平尺寸调整部121和131中的缩小处理的缩小率的倒数。但是并不限于此。第2水平尺寸调整部124和134可以分别在水平方向上缩小左眼用图像240L和右眼用图像240R。
最后，合成部140通过对左眼用图像250L和右眼用图像250R进行合成来生成合成图像260(S160)。合成图像260例如如图2B所示，是将包含在左眼用图像250L中的像素和包含在右眼用图像250R中的像素排列为棋盘状的图像。通过合成得到的合成图像260被作为输出三维影像信号53输出。
如上所述，实施方式1所涉及的影像信号处理装置100通过对输入三维影像信号52进行处理来生成输出三维影像信号53。
接着，对变换处理部122的详细结构及其动作、从左眼用图像中获取的信息以及使用该信息的处理进行说明。
实施方式1所涉及的变换处理部122在进行IP变换之前进行膜检测。膜检测是图像特征检测处理的一例，是检测影像数据是否是根据膜影像生成的影像数据的处理。这里，作为膜检测，变换处理部122检测只包含左眼用图像的左眼用影像数据是否是根据膜影像生成的影像数据。
并且，变换处理部122将膜检测的结果输出给变换处理部132。另外，在变换处理部132中，对只包含右眼用图像的右眼用影像数据进行IP变换，以下，对变换处理部122的具体结构和动作进行说明。
图6是表示实施方式1所涉及的变换处理部122的结构的一例的框图。如图6所示，变换处理部122具备膜检测部310、IP变换部320。
膜检测部310是本发明所涉及的信息获取部的一例，对左眼用图像进行膜检测。具体来讲，膜检测部310通过对包含左眼用图像的左眼用影像数据进行膜检测，获取表示输入三维影像信号是否是根据膜影像生成的影像信号的膜信息、以及在输入三维影像信号是根据膜影像生成的影像信号的情况下表示根据膜影像所包含的多个帧中的同一帧生成的图片的图片信息。另外，这里，作为图片信息的一例，膜检测部310获取表示应当合成的场的IP变换信息。
IP变换部320是本发明所涉及的左眼用图像处理部的一例，使用膜信息和IP变换信息将左眼用影像数据从隔行方式变换为逐行方式。具体来讲，在膜信息表示输入三维影像信号是根据膜影像生成的影像信号的情况下，IP变换部320使用IP变换信息将左眼用影像数据从隔行方式变换为逐行方式。并且，在膜信息表示输入三维影像信号不是根据膜影像生成的影像信号的情况下，IP变换部320例如通过对相邻的2个场进行合成，将左眼用影像数据从隔行方式变换为逐行方式。
另外，变换处理部132是本发明所涉及的右眼用图像处理部的一例，对右眼用影像数据进行预定的处理。具体来讲，变换处理部132从膜检测部310接收作为膜检测的结果的膜信息和IP变换信息。并且，变换处理部132与IP变换部320同样，使用膜信息和IP变换信息将右眼用影像数据从隔行方式变换为逐行方式。
图7是表示实施方式1所涉及的变换处理部122的动作的一例的流程图。
首先，膜检测部310对左眼用影像数据进行膜检测(S131)。另外，通过将右眼用影像数据输入给第1处理部120，膜检测部310也可以对右眼用影像数据进行膜检测。作为膜检测的结果的膜信息和IP变换信息被输出给IP变换部320和变换处理部132。
接着，IP变换部320和变换处理部132使用膜信息和IP变换信息，将左眼用影像数据和右眼用影像数据从隔行方式变换为逐行方式(S132)。关于膜检测和IP变换的具体处理，以下举出膜影像和三维影像的例子进行说明。
图8是表示膜影像和输入三维影像信号的一例的图。
在图8所示的例子中，膜影像是24帧/秒(24fps)的逐行方式的影像(24p的影像)。
输入三维影像信号例如是表示帧频是60fps的隔行方式的影像(60i的影像)的信号。即，输入三维影像信号在1秒钟内包含60张顶场和底场(只包含顶场或底场的帧频为30fps)。
如图8所示，在从24p的影像生成60i的影像的情况下，首先读出3次24p的影像所包含的帧A，分别用于顶场(Atop)、底场(Abtm)、顶场(Atop)。接着读出2次24p的影像所包含的帧B，分别用于底场(Bbtm)、顶场(Btop)。接着读出3次24p的影像所包含的帧C，分别用于底场(Cbtm)、顶场(Ctop)、底场(Cbtm)。
如上所述，通过交替重复帧的3次读出和2次读出，能够从24p的影像生成60i的影像(3-2下拉处理)。另外，在进行其他帧频间的交换的情况下，也同样只要根据变换前的帧频和变换后的帧频的比例来决定读出次数即可。
接着，说明将如图8所示那样生成的60i的影像(输入三维影像信号)IP变换为60p的影像(输出三维影像信号)的情况。另外，60p的影像是60fps的逐行方式的影像。
作为膜检测，膜检测部310计算2个场间的差分。例如，膜检测部310计算成为对象的场与其前面第2个场之间的差分。如图8所示，包含从作为24p的影像的膜影像生成的60i的影像的输入三维影像信号在5张场中包含2张相同的场(例如，第1和第3是Atop，第6和第8是Cbtm)。
因此，在依次计算2个场间的差分时，5张场中存在1组差分几乎为0的场组。由此，膜检测部310通过检测差分几乎为0的比例，能够检测出包含输入三维影像信号被3-2下拉的影像。即，在检测出差分几乎为0的比例为5张场中有1组场的情况下，膜检测部310将表示输入三维影像信号是根据膜影像生成的影像信号的膜信息输出给IP变换部320。
另外，膜检测部310在检测出差分几乎为0的比例是5张场中有1组场的情况下，获取表示膜影像的帧频的帧频信息。即，由于输入三维影像信号是被3-2下拉的影像、并且输入三维影像信号的帧频为60fps，所以可知膜影像的帧频是24(＝60×2/5)fps。并且，膜检测部310在IP变换时，将表示应当合成的顶场和底场的IP变换信息输出给IP变换部320。
图9是表示实施方式1所涉及的IP变换部320将60i的影像IP变换为60p的影像时的处理例的图。
IP变换部320按照每场从60i的输入影像、将该输入影像延迟1帧后的第1延迟影像、将60i的输入影像延迟2帧后的第2延迟影像中选择2个影像来进行合成。此时，选择哪个影像、即选择哪个顶场和哪个底场，根据作为膜检测部310的膜检测的结果的IP变换信息来决定。
具体来讲，膜检测部310在检测出输入三维影像信号是被3-2下拉的影像信号的情况下，将表示根据膜影像所包含的同一帧生成的场的信息作为IP变换信息输出。并且，IP变换部320根据所接收的IP变换信息，选择根据同一帧生成的场之间进行合成。
例如，IP变换部320通过合成由图9中虚线所示的四边形围成的2张场，生成1帧图像。
具体来讲，IP变换部320在时刻T2，合成第1延迟影像的Atop和60i的影像的Abtm。并且，在时刻T3，IP变换部320合成第1延迟影像的Abtm和60i的影像的Atop。另外，在时刻T3，也可以合成第1延迟影像的Abtm和第2延迟影像的Atop。
另外，在时刻T4，IP变换部320合成第1延迟影像的Atop和第2延迟影像的Abtm。接着，在时刻T5，IP变换部320合成60i的影像的Btop和第1延迟影像的Abtm。
这样，在对3-2下拉的影像信号进行IP变换的情况下，关于根据同一帧生成的3张连续的场，只要最初的2张合成第1延迟影像和输入影像，剩下的1张合成第1延迟影像和第2延迟影像即可。另外，正中的1张可以合成第1延迟影像和第2延迟影像。另外，关于根据同一帧生成的2张连续的场，只要第1张合成第1延迟影像和输入影像，第2张合成第1延迟影像和第2延迟影像即可。
如上所述，IP变换部320通过选择根据膜影像所包含的同一帧生成的场之间来进行合成，从预定帧频的隔行方式的输入三维影像信号生成相同帧频的逐行方式的输出三维影像信号。
并且，IP变换部320在膜信息表示输入三维影像信号不是根据膜影像生成的影像信号的情况下，通过依次合成相邻的场，生成逐行方式的输出三维影像信号。
另外，在输入三维影像信号是根据膜影像生成的影像信号的情况下，IP变换部320不进行膜检测，在只依次合成了相邻的场的情况下，例如合成Atop和Bbtm，从而导致画质劣化。因此，通过如上所述进行膜检测，本实施方式所涉及的IP变换部320能够对根据膜影像所包含的同一帧生成的场之间进行合成，所以能够防止画质的劣化。
如上所述，在实施方式1所涉及的变换处理部122中，对左眼用影像数据进行膜检测，并将其结果输出给变换处理部132。变换处理部132使用变换处理部122所输入的膜检测的结果，对右眼用影像数据进行IP变换。
左眼用图像和右眼用图像说起来是从不同视点拍摄相同被摄体所获得的图像或者将相同图像错开预定视差而生成的图像。因此，无论对左眼用影像数据和右眼用影像数据的哪个进行膜检测，都能够获得相同的结果。
因此，如本实施方式那样，通过只对左眼用影像数据和右眼用影像数据中的任意一方进行膜检测，并将其检测结果利用于左眼用影像数据和右眼用影像数据双方，能够避免处理的重复。由此，本实施方式所涉及的影像信号处理装置100能够避免冗长的处理，能够降低消耗功率并且提高处理速度。
并且，当在左眼用影像数据和右眼用影像数据中独立地进行了检测的情况下，有可能获得相互不同的检测结果。在该情况下，由于变换处理部122和132根据不同的检测结果进行IP变换，所以合成部140在对左眼用图像和右眼用图像进行了合成的情况下，有可能生成不自然的影像。
与此相对，在本实施方式所涉及的影像信号处理装置100中，由于使用相同的检测结果对左眼用影像数据和右眼用影像数据的双方进行处理，所以能够降低如上述那样生成不自然的影像的可能性。
另外，在上述说明中，示出了对隔行方式的输入三维影像信号进行膜检测的结构，但也可以对逐行方式的输入三维影像信号进行膜检测。例如，假定将根据图8所示的24p的膜影像(ABC…)生成的图9所示的60p的影像信号(AAABBCCC…)作为输入三维影像信号输入给本实施方式所涉及的影像信号处理装置100的情况。
膜检测部310计算左眼用影像数据所包含的2个帧之间的差分。例如，膜检测部310计算在时间上相邻的2个帧之间的差分，由此差分为“小小大小大小小大小大…”。由此，膜检测部310将表示输入三维影像信号包含被3-2下拉的影像的膜信息输出给IP变换部320。
另外，膜检测部310将表示根据膜影像所包含的同一帧所生成的帧的帧信息作为图片信息的一例输出给IP变换部320和变换处理部132。例如，在时间上相邻的2个帧之间的差分几乎为0的情况下，膜检测部310通过判定为这2个帧是根据膜影像所包含的同一帧所生成的帧来输出帧信息。
IP变换部320接收膜信息和帧信息，根据所接收的膜信息和帧信息来变换作为左眼用影像数据的输入三维影像信号的帧频。例如，在膜信息表示输入三维影像信号包含被3-2下拉的影像的情况下，IP变换部320使用帧信息来决定应当输出的帧及其张数。
例如，IP变换部320通过两张两张地选择输出同一帧，输出帧频为48fps的影像信号(AABBCC…)。在该影像信号中两张两张地包含同一帧。或者，IP变换部320也可以通过五张五张地选择输出同一帧，输出帧频为120fps的影像信号(AAAAABBBBBCCCCC…)。该影像信号五张五张地包含同一帧。
变换处理部132对右眼用影像数据进行与IP变换部320同样的处理。
也可以如上所述对逐行方式的输入三维影像信号进行膜检测。在该情况下也是，由于在左眼用影像数据和右眼用影像数据中膜检测结果一致，所以能够通过只对一方进行膜检测来抑制处理量的增大。
另外，IP变换部320也可以进行扫描方式的变换和帧频的变换这双方。例如，IP变换部320将隔行方式的影像信号(60i的影像信号)变换为逐行方式的影像信号(60p的影像信号)，并且如上述那样对所变换的影像信号的帧频进行变换。由此，例如，IP变换部320能够从60i的影像信号生成48p或120p的影像信号。
并且，在膜检测中，作为输入三维影像信号，对3-2下拉的影像信号进行了说明，但也可以是2-2下拉的影像信号。例如，在计算相邻的2场的差分时，如果是2-2下拉的影像信号，则差分重复“大小大小…”。因此，膜检测部310通过判断所检测到的差分的变化的倾向，能够检测出输入三维影像信号是2-2下拉的影像信号。
另外，膜检测部310进行的膜检测不限于上述方法，也可以是其他方法。
并且，说明了本实施方式所涉及的影像信号处理装置100使用第1处理部120和第2处理部130对左眼用影像数据和右眼用影像数据进行并行处理的结构，但也可以只具备2个处理部中的任意一个处理部。例如输入选择部110也可以将左眼用影像数据和右眼用影像数据的双方输入给第1处理部120。
第1处理部120具备的各处理部分别依次处理左眼用影像数据和右眼用影像数据。例如，在处理了左眼用影像数据之后处理右眼用影像数据(或者，也可以相反)。此时，只要将从左眼用影像数据中获取的膜信息和IP变换信息保存在存储器等中即可。
并且，在本实施方式中，对左眼用图像进行了膜检测，但也可以对右眼用图像进行膜检测，将检测结果利用于左眼用图像和右眼用图像的双方。
如上所述，实施方式1所涉及的影像信号处理装置100具备作为信息获取部的一例的膜检测部310，该膜检测部310从左眼用图像和右眼用图像的一方中获取进行IP变换等预定处理时使用的信息。并且，影像信号处理装置100具备作为图像处理部的一例的IP变换部320和变换处理部132，它们使用作为信息获取部的一例的膜检测部310所获取的信息，对左眼用图像和右眼用图像的双方进行IP变换或帧频的变换。
通过该结构，根据实施方式1所涉及的影像信号处理装置100，只要仅对左眼用图像和右眼用图像的一方进行作为用于获取上述信息的处理的一例的膜检测即可，能够避免处理的重复。因此，能够抑制处理量的增大。
(实施方式2)
实施方式2所涉及的影像信号处理装置与实施方式1同样，其特征在于，具备：信息获取部，从左眼用图像和右眼用图像的一方中获取进行预定处理时所使用的信息；以及图像处理部，使用信息获取部所获取的信息，对所述左眼用图像和所述右眼用图像的双方进行所述处理。更具体来讲，在实施方式2中，信息获取部通过检测在左眼用图像和右眼用图像的一方中是否包含亮度值恒定的特定图像，来获取表示包含特定图像的区域的特定图像信息。
另外，以下省略与实施方式1重复的说明，以与实施方式1的不同点为中心进行说明。
实施方式2所涉及的影像信号处理装置与实施方式1的图3所示的影像信号处理装置100几乎相同，不同点在于代替输入选择部110而具备输入选择部410。以下，首先对实施方式2所涉及的影像信号处理装置具备的输入选择部410的结构进行说明。
图10A和图10B是表示实施方式2所涉及的影像信号处理装置具备的输入选择部410的结构的一例的框图。如图10A所示，输入选择部410具备分割部411、特定图像检测部412、APL计算部413和414。
分割部411将输入三维影像信号分割成左眼用图像和右眼用图像。左眼用图像被输出给特定图像检测部412，右眼用图像被输出给APL计算部414。另外，左眼用图像被输出给APL计算部414，右眼用图像被输出给特定图像检测部412。
并且，在输入三维影像信号被预先分割成左眼用图像和右眼用图像的情况下，输入选择部410也可以不具备分割部411。在该情况下，直接将左眼用图像输入给特定图像检测部12，将右眼用图像输入给APL计算部414。
特定图像检测部412是本发明所涉及的信息获取部的一例，通过检测在左眼用图像和右眼用图像的一方中是否包含亮度值恒定的特定图像，来获取表示包含该特定图像的区域的特定图像信息。这里，由于输入左眼用图像，所以特定图像检测部412检测在左眼用图像中是否包含特定图像。具体来讲，特定图像检测部412进行侧边检测和上下黑边检测。
如图10A所示，特定图像检测部412具备侧边检测部412a和上下黑边检测部412b。
侧边检测部412a对左眼用图像和右眼用图像的一方检测图像的左侧和右侧是否包含特定图像(侧边检测或左右黑边检测)。这里，由于输入左眼用图像，所以侧边检测部412a检测左眼用图像的左侧和右侧是否包含特定图像。另外，特定图像是亮度值恒定的图像，例如是黑色图像。
侧边检测部412a通过进行侧边检测，获取表示包含特定图像的区域的特定图像信息。特定图像信息例如是表示包含特定图像的区域是从图像的左侧或右侧起几个像素的信息。
上下黑边检测部412b对左眼用图像和右眼用图像的一方检测图像的上侧和下侧是否包含特定图像(上下黑边检测)。这里，由于输入左眼用图像，所以上下黑边检测部412b检测左眼用图像的上侧和下侧是否包含特定图像。
上下黑边检测部412b通过进行上下黑边检测，获取表示包含特定图像的区域的特定图像信息。特定图像信息例如是表示包含特定图像的区域是从图像的上侧或下侧起几个像素的信息。
另外，特定图像检测部412也可以只进行侧边检测和上下黑边检测中的任意一方。在进行了双方检测的情况下，特定图像检测部412将侧边检测部412a所获取的特定图像信息和上下黑边检测部412b所获取的特定图像信息合并起来作为表示包含特定图像的区域的特定图像信息输出给APL计算部413和414。
APL计算部413和414是本发明所涉及的图像处理部的一例，对左眼用图像和右眼用图像的双方计算特定图像信息表示的区域以外的有效图像区域的平均亮度值(Average Picture Level)。具体来讲，APL计算部413计算左眼用图像中特定图像信息表示的区域以外的有效图像区域的平均亮度值。并且，APL计算部414计算右眼用图像中特定图像信息表示的区域以外的有效图像区域的平均亮度值。另外，有效图像区域是显示本来图像的区域。
这里，对特定图像的例子进行说明。
图11A是表示侧边图像500的一例的图。图11B是表示上下黑边图像600的一例的图。
侧边图像500分别在本来的图像510的左侧和右侧附加了特定图像520。具体来讲，当在纵横比为16∶9的画面上显示了纵横比为4∶3的本来的图像510时，将特定图像520附加在本来的图像510。另外，侧边也称为左右黑边。
侧边检测部412a检测是否在本来的图像510上附加有图11A所示的特定图像520。例如，侧边检测部412a判定所输入的左眼用图像的左侧区域(几个像素列的区域)和右侧区域(几个像素列的区域)的双方所包含的像素的亮度值是否全部是相同的预定值(黑色)。
在判定为左侧区域和右侧区域所包含的像素的亮度值全部是相同的预定值(黑色)的情况下，侧边检测部412a判定所输入的左眼用图像是侧边图像500。并且，侧边检测部412a将表示特定图像520的区域的特定图像信息输出给APL计算部413。APL计算部413计算侧边图像500中除去特定图像520的区域(有效图像区域)、即本来图像510的平均亮度值。
在计算出侧边图像500的平均亮度值的情况下，计算了包含亮度值恒定的特定图像520的平均亮度值。即，计算出与本来的图像510的平均亮度值不同的值。因此，在使用平均亮度值校正图像的情况下等，由于平均亮度值不同，所以无法准确校正图像。与此相对，在本实施方式中，通过进行侧边检测并确定特定图像区域，能够进行准确的校正处理等。
上下黑边图像600分别在本来的图像610的上侧和下侧附加了特定图像620。具体来讲，当在纵横比为4∶3的画面上显示了纵横比为16∶9的本来的图像610时，将特定图像620附加在本来的图像610上。
上下黑边检测部412b检测是否在本来的图像610上附加有图11B所示的特定图像620。例如，上下黑边检测部412b判定所输入的右眼用图像的上侧区域(几个像素行的区域)和下侧区域(几个像素行的区域)的双方所包含的像素的亮度值是否全部是相同的预定值(黑色)。
在判定为上侧区域和下侧区域所包含的像素的亮度值全部是相同的预定值(黑色)的情况下，上下黑边检测部412b判定所输入的右眼用图像是上下黑边图像600。并且，上下黑边检测部412b将表示特定图像520的区域的特定图像信息输出给APL计算部413。APL计算部413计算上下黑边图像600中除去特定图像620的区域(有效图像区域)、即本来图像610的平均亮度值。由此，与侧边检测同样，通过进行上下黑边检测并确定特定图像的区域，能够进行准确的校正处理等。
另外，上述的纵横比是一例，即使在其他的纵横比的情况下也是同样的。
如上所述，APL计算部414使用从左眼用图像中检测到的特定图像信息来计算右眼用图像的平均亮度值。在左眼用图像和右眼用图像中，通常没有只在一方包含特定图像的情况，也没有在不同的区域包含特定图像的情况。因此，从左眼用图像中检测到的特定图像信息与从右眼用图像中检测到的特定图像信息几乎是一致的。
因此，在不需要严密的结果的情况下，从左眼用图像和右眼用图像的双方获取特定图像信息的处理是冗长的，如本实施方式那样，通过只从任意一方中获取特定图像信息，能够抑制处理量的增大。另外，在需要严密结果的情况下，只要侧边检测部412a和上下黑边检测部412b分别对左眼用图像和右眼用图像进行侧边检测和上下黑边检测即可。
另外，如图10B所示，输入选择部410可以不具备APL计算部414。即，APL计算部413可以将从左眼用图像中计算出的平均亮度值用作右眼用图像的平均亮度值。这是因为左眼用图像的平均亮度值与右眼用图像的平均亮度值也为相同值的情况较多。另外，此时的APL计算部413是本发明所涉及的信息获取部的一例。
接着，使用图12对实施方式2所涉及的影像信号处理装置的动作中输入选择部410的动作进行说明。另外，实施方式2所涉及的影像信号处理装置的动作与实施方式1所涉及的影像信号处理装置100的动作(参照图4)几乎相同，输入选择部110的动作(S110)不同。
图12是表示实施方式2所涉及的影像信号处理装置具备的输入选择部410的动作的一例的流程图。图12相当于图4所示的输入选择部110的动作(S110)。
首先，分割部411将输入三维影像信号分割为左眼用图像和右眼用图像(S210)。左眼用图像被输出给特定图像检测部412，右眼用图像被输出给APL计算部414。
接着，特定图像检测部412对左眼用图像进行侧边检测和上下黑边检测(S220)。另外，也可以只执行侧边检测和上下黑边检测中的任意一方。例如，在通过侧边检测检测到特定图像的情况下，也可以不进行上下黑边检测。相反，在通过上下黑边检测检测到特定图像的情况下，也可以不进行侧边检测。作为检测结果的特定图像信息被输出到APL计算部413和APL计算部414的双方。
接着，APL计算部413使用特定图像信息来计算左眼用图像的平均亮度值，APL计算部414使用特定图像信息来计算右眼用图像的平均亮度值(S230)。
如上所述，在实施方式2所涉及的影像信号处理装置中，在输入选择部410中，通过对左眼用图像进行侧边检测和上下黑边检测来检测特定图像，使用所检测的结果对左眼用图像和右眼用图像的双方进行平均亮度值的计算。
由此，根据实施方式2所涉及的影像信号处理装置，通过只从左眼用图像和右眼用图像的任意一方中获取特定图像信息，能够抑制处理量的增大。
另外，在实施方式2中，输入选择部410进行了侧边检测和上下黑边检测，但与实施方式1相同，变换处理部122也可以对左眼用图像进行这些检测。并且，变换处理部122也可以将所获得的检测结果输出给变换处理部132。
并且，平均亮度值的计算也同样可以不由输入选择部410进行而由变换处理部122和132进行。或者也可以由未图示的其他处理部执行。
如上所述，本发明所涉及的影像信号处理装置是包含左眼用图像和右眼用图像的三维影像信号处理装置，其中，使用从左眼用图像和右眼用图像的任意一方获取的信息对左眼用图像和右眼用图像的双方进行预定处理。左眼用图像和右眼用图像通常是从不同视点拍摄相同被摄体而获得的图像，这是利用相互共同点多的情况。
例如，如上所述，膜检测结果、侧边检测结果和上下黑边检测结果等在左眼用图像和右眼用图像中是共同的。因此，通过只对任意一方进行获得共同结果的处理，能够避免处理的重复，能够抑制处理量的增大。
并且，在通常应当获得相同结果却获得了不同结果的情况下，有可能在合成左眼用图像和右眼用图像时生成不自然的图像。在本发明所涉及的影像信号处理装置中，由于使用共同的结果，所以能够防止这种不自然的图像的生成。
以上，根据实施方式对影像信号处理装置和影像信号处理方法进行了说明，但本发明不限于这些实施方式。只要不脱离本发明的宗旨，将本领域技术人员能够想到的各种变形应用于本实施方式或组合不同实施方式中的结构要素而构筑的方式也包含在本发明的范围内。
例如，可以对左眼用图像和右眼用图像的一方进行CM检测。CM检测是判定所输入的左眼用图像或右眼用图像是包含在影像中的广告信息等CM还是电影等内容的处理。由于在同一显示时刻只有左眼用图像和右眼用图像的任意一方是CM这样的情况通常是不可能的，所以CM检测结果在左眼用图像和右眼用图像中也是相同的。
因此，能够对左眼用图像和右眼用图像的任意一方进行CM检测，并将所获得的结果用作左眼用图像和右眼用图像的双方的CM检测结果。另外，例如输入选择部110或410进行CM检测。例如，通过检测表示图像是CM的识别符、或者在CM和内容中检测解像度的不同来判定所输入的左眼用图像或右眼用图像是否是CM。
在判定为左眼用图像是CM的情况下，例如，第1水平尺寸调整部121和131通过以较高的缩小率来缩小左眼用图像和右眼用图像，能够降低以后的处理量。
并且，在对所输入的三维影像信号进行编码的情况下，可以从包含左眼用图像的左眼用影像数据和包含右眼用图像的右眼用影像数据的一方中检测动作。并且，同样也可以决定帧或场的参照关系。这些处理例如由输入选择部110或410、变换处理部122或132或者其他处理部进行。
另外，本发明所涉及的影像信号处理装置100搭载在图13所示的数字录像机20和数字电视机30中。
另外，根据上述实施方式对本发明进行了说明，但当然不限于上述实施方式。以下的情况也包含在本发明的范围内。
上述的各装置具体来讲是由微处理器、ROM、RAM、硬盘单元、显示单元、键盘、鼠标等构成的计算机系统。RAM或硬盘单元中存储有计算机程序。微处理器根据计算机程序进行动作，由此各装置达成其功能。这里，计算机程序为了达成预定的功能，组合多个表示针对计算机的指令的命令编码而构成。
构成上述各装置的构成要素的一部分或全部可以由1个系统LSI构成。系统LSI是将多个构成要素集成在1个芯片上制造而成的超多功能LSI，具体来讲，是构成为包含微处理器、ROM、RAM等的计算机系统。RAM中存储计算机程序。微处理器根据计算机程序进行动作，由此系统LSI达成其功能。
构成上述各装置的构成要素的一部分或全部也可以由可装卸在各装置中的IC卡或单体的模块构成。IC卡或模块是由微处理器、ROM、RAM等构成的计算机系统。IC卡或模块也可以包含上述的超多功能LSI。微处理器根据计算机程序进行动作，由此IC卡或模块达成其功能。该IC卡或模块也可以具有耐干扰性。
并且，本发明可以是上述所示的方法。并且，也可以是通过计算机实现这些方法的计算机程序，还可以是由计算机程序构成的数字信号。
并且，本发明可以将计算机程序或数字信号记录在计算机能够读取记录介质例如软盘、硬盘、CD-ROM、MO(Magneto-Optical Disk：磁光盘)、DVD(Digital Versatile Disc：数字多用途光盘)、DVD-ROM、DVD-RAM、BD、半导体存储器等中。并且，也可以是记录在这些记录介质中的数字信号。
并且，本发明可以经由电气通信线路、无线或有线通信线路、以互联网为代表的网络、数据广播等来传送计算机程序或数字信号。
并且，本发明可以是具备微处理器和存储器的计算机系统，其中，存储器存储上述计算机程序，微处理器根据计算机程序来进行动作。
并且，通过将程序或数字信号记录到记录介质中进行移送、或者经由网络等对程序或数字信号进行移动，能够由独立的其他计算机系统来实施。
产业上的可利用性
本发明所涉及的影响信号处理装置和影像信号处理方法起到能够抑制处理量的增大的效果，例如能够应用于数字电视机和数字录像机等。
符号说明
10：影像信号处理系统；20：数字录像机；21、31：输入部；22、32：解码器；23、33：HDMI通信部；30：数字电视机；34：显示面板；35：发射机；40：快门眼镜；41：HDMI电缆；42：记录介质；43：广播波；51、54：三维影像信号；52、55、56：输入三维影像信号；53、57、58：输出三维影像信号；57L、58L、210L、220L、230L、240L、250L：左眼用图像；57R、58R、210R、220R、230R、240R、250R：右眼用图像；100：影像信号处理装置；110、410：输入选择部；120：第1处理部；121、131：第1水平尺寸调整部；122、132：变换处理部；123、133：垂直尺寸调整部；124、134：第2水平尺寸调整部；130：第2处理部；140：合成部；210Lb、220Lb：左眼用底场；210Lt、220Lt：左眼用顶场；210Rb、220Rb：右眼用底场；210Rt、220Rt：右眼用顶场；260：合成图像；310：膜检测部；320：IP变换部；411：分割部；412：特定图像检测部；412a：侧边检测部；412b：上下黑边检测部；413、414：APL计算部；500：侧边图像；510、610：本来的图像；520、620：特定图像；600：上下黑边图像。

Claims (11)

1.一种影像信号处理装置，对包含左眼用图像和右眼用图像的三维影像信号进行处理，其中，
所述影像信号处理装置具备：
信息获取部，从所述左眼用图像和所述右眼用图像的一方中获取进行预定处理时所用的信息；以及
图像处理部，使用所述信息获取部所获取的信息对所述左眼用图像和所述右眼用图像的双方进行所述预定处理。
2.根据权利要求1所述的影像信号处理装置，其中，
所述信息获取部通过对所述左眼用图像和所述右眼用图像的一方进行膜检测来获取膜信息，该膜信息表示所述三维影像信号是否是根据膜影像生成的影像信号。
3.根据权利要求2所述的影像信号处理装置，其中，
在所述三维影像信号是根据膜影像生成的影像信号的情况下，所述信息获取部还获取图片信息，该图片信息表示根据所述膜影像所包含的多个帧中的同一帧生成的图片，
在所述膜信息表示所述三维影像信号是根据膜影像生成的影像信号的情况下，所述图像处理部使用所述图片信息分别对所述左眼用图像和所述右眼用图像的双方进行扫描方式的变换和帧频的变换中的至少一方，来作为所述预定处理。
4.根据权利要求1所述的影像信号处理装置，其中，
所述信息获取部通过检测所述左眼用图像和所述右眼用图像的一方中是否包含亮度值恒定的特定图像，来获取表示包含有该特定图像的区域的特定图像信息。
5.根据权利要求4所述的影像信号处理装置，其中，
所述信息获取部通过对所述左眼用图像和所述右眼用图像的一方检测图像左侧和右侧是否包含所述特定图像，来获取所述特定图像信息。
6.根据权利要求4所述的影像信号处理装置，其中，
所述信息获取部通过对所述左眼用图像和所述右眼用图像的一方检测图像上侧和下侧是否包含所述特定图像，来获取所述特定图像信息。
7.根据权利要求5所述的影像信号处理装置，其中，
所述图像处理部对所述左眼用图像和所述右眼用图像的双方分别计算所述特定图像信息表示的区域以外的有效图像区域的平均亮度值。
8.根据权利要求1所述的影像信号处理装置，其中，
所述影像信号处理装置还具备分割部，该分割部将所述三维影像信号分割成所述左眼用图像和所述右眼用图像，
所述图像处理部具有：
左眼用图像处理部，对所述左眼用图像进行所述预定处理；以及
右眼用图像处理部，对所述右眼用图像进行所述预定处理，
所述信息获取部从所述分割部所分割的所述左眼用图像和所述右眼用图像的一方中获取所述信息，并将所获取的信息输出给所述左眼用图像处理部和所述右眼用图像处理部。
9.一种影像信号处理方法，对包含左眼用图像和右眼用图像的三维影像信号进行处理，其中，
所述影像信号处理方法包含如下步骤：
信息获取步骤，从所述左眼用图像和所述右眼用图像的一方中获取进行预定处理时所用的信息；以及
图像处理步骤，使用在所述信息获取步骤中获取的信息对所述左眼用图像和所述右眼用图像的双方进行所述预定处理。
10.一种集成电路，对包含左眼用图像和右眼用图像的三维影像信号进行处理，其中，
所述集成电路具备：
信息获取部，从所述左眼用图像和所述右眼用图像的一方中获取进行预定处理时所用的信息；以及
图像处理部，使用所述信息获取部所获取的信息对所述左眼用图像和所述右眼用图像的双方进行所述预定处理。
11.一种用于使计算机执行影像信号处理方法的程序，该影像信号处理方法对包含左眼用图像和右眼用图像的三维影像信号进行处理，其中，
所述程序包含如下步骤：
信息获取步骤，从所述左眼用图像和所述右眼用图像的一方中获取进行预定处理时所用的信息；以及
图像处理步骤，使用在所述信息获取步骤中获取的信息对所述左眼用图像和所述右眼用图像的双方进行所述预定处理。
CN2010800099765A 2009-09-17 2010-06-21 影像信号处理装置和影像信号处理方法 Pending CN102342122A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP216273/2009 2009-09-17
JP2009216273A JP4747214B2 (ja) 2009-09-17 2009-09-17 映像信号処理装置、及び、映像信号処理方法
PCT/JP2010/004113 WO2011033706A1 (ja) 2009-09-17 2010-06-21 映像信号処理装置、及び、映像信号処理方法

Publications (1)

Publication Number Publication Date
CN102342122A true CN102342122A (zh) 2012-02-01

Family

ID=43758324

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2010800099765A Pending CN102342122A (zh) 2009-09-17 2010-06-21 影像信号处理装置和影像信号处理方法

Country Status (4)

Country Link
US (1) US20110285819A1 (zh)
JP (1) JP4747214B2 (zh)
CN (1) CN102342122A (zh)
WO (1) WO2011033706A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10257487B1 (en) * 2018-01-16 2019-04-09 Qualcomm Incorporated Power efficient video playback based on display hardware feedback
KR20200084273A (ko) * 2019-01-02 2020-07-10 엘지전자 주식회사 무선 디바이스 및 무선 시스템

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1652569A (zh) * 2003-12-23 2005-08-10 创世纪微芯片公司 自适应显示控制器
US6956964B2 (en) * 2001-11-08 2005-10-18 Silicon Intergrated Systems Corp. Apparatus for producing real-time anaglyphs
CN1987929A (zh) * 2006-12-27 2007-06-27 浙江大学 一种基于累计直方图的非线性亮度校正方法
CN101304478A (zh) * 2007-05-09 2008-11-12 松下电器产业株式会社 图像质量调整装置、图像质量调整方法和程序

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0642742B2 (ja) * 1991-01-14 1994-06-01 株式会社エイ・ティ・アール視聴覚機構研究所 立体テレビジョンシステム
JP3096563B2 (ja) * 1994-05-19 2000-10-10 三洋電機株式会社 立体画像再生装置
JP3486461B2 (ja) * 1994-06-24 2004-01-13 キヤノン株式会社 画像処理装置及び方法
JP3771973B2 (ja) * 1996-09-26 2006-05-10 オリンパス株式会社 立体映像表示装置
US6584219B1 (en) * 1997-09-18 2003-06-24 Sanyo Electric Co., Ltd. 2D/3D image conversion system
JP3619063B2 (ja) * 1999-07-08 2005-02-09 キヤノン株式会社 立体画像処理装置、その方法、立体視パラメータ設定装置、その方法そしてコンピュータプログラム記憶媒体
US20020164068A1 (en) * 2001-05-03 2002-11-07 Koninklijke Philips Electronics N.V. Model switching in a communication system
TW548487B (en) * 2001-05-07 2003-08-21 Vrex Inc Single cell liquid crystal shutter glasses
US20020180663A1 (en) * 2001-06-04 2002-12-05 Kazuo Maeda Method for manufacturing 3D image display body, and film for use in forming 3D image display body
US7136417B2 (en) * 2002-07-15 2006-11-14 Scientific-Atlanta, Inc. Chroma conversion optimization
JP2004186863A (ja) * 2002-12-02 2004-07-02 Amita Technology Kk 立体映像表示装置及び立体映像信号処理回路
US7746377B2 (en) * 2003-11-28 2010-06-29 Topcon Corporation Three-dimensional image display apparatus and method
KR100667810B1 (ko) * 2005-08-31 2007-01-11 삼성전자주식회사 ３ｄ 영상의 깊이감 조정 장치 및 방법
KR100739730B1 (ko) * 2005-09-03 2007-07-13 삼성전자주식회사 3ｄ 입체 영상 처리 장치 및 방법
US8233548B2 (en) * 2007-05-09 2012-07-31 Panasonic Corporation Noise reduction device and noise reduction method of compression coded image
JP5347717B2 (ja) * 2008-08-06 2013-11-20 ソニー株式会社 画像処理装置、および画像処理方法、並びにプログラム
US9030535B2 (en) * 2009-06-23 2015-05-12 Lg Electronics Inc. Shutter glasses, method for adjusting optical characteristics thereof, and 3D display system adapted for the same
US8610757B2 (en) * 2009-08-24 2013-12-17 Next3D, Inc. Stereoscopic video encoding and decoding methods and apparatus
US20110170069A1 (en) * 2010-01-11 2011-07-14 David Lee Lund Stereoscopic film marking and method of use

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6956964B2 (en) * 2001-11-08 2005-10-18 Silicon Intergrated Systems Corp. Apparatus for producing real-time anaglyphs
CN1652569A (zh) * 2003-12-23 2005-08-10 创世纪微芯片公司 自适应显示控制器
CN1987929A (zh) * 2006-12-27 2007-06-27 浙江大学 一种基于累计直方图的非线性亮度校正方法
CN101304478A (zh) * 2007-05-09 2008-11-12 松下电器产业株式会社 图像质量调整装置、图像质量调整方法和程序

Also Published As

Publication number Publication date
WO2011033706A1 (ja) 2011-03-24
JP4747214B2 (ja) 2011-08-17
JP2011066725A (ja) 2011-03-31
US20110285819A1 (en) 2011-11-24

Similar Documents

Publication Publication Date Title
JP5575891B2 (ja) 自動三次元ビデオフォーマット変換方法及びその装置
US8565517B2 (en) Method and apparatus for creating stereo image according to frequency characteristics of input image and method and apparatus for reproducing the created stereo image
RU2568309C2 (ru) Обнаружение формата трехмерного видео
US8259162B2 (en) Method and apparatus for generating stereoscopic image data stream for temporally partial three-dimensional (3D) data, and method and apparatus for displaying temporally partial 3D data of stereoscopic image
US6295089B1 (en) Unsampled hd MPEG video and half-pel motion compensation
JP5529870B2 (ja) 二次元／三次元再生モード決定方法、二次元／三次元再生モード決定装置及び記憶媒体
US9218644B2 (en) Method and system for enhanced 2D video display based on 3D video input
US20100201870A1 (en) System and method for frame interpolation for a compressed video bitstream
CN102668577A (zh) 影像信号处理装置以及影像信号处理方法
US8441527B2 (en) Three-dimensional image processing apparatus and method of controlling the same
US20080303892A1 (en) Method and apparatus for generating block-based stereoscopic image format and method and apparatus for reconstructing stereoscopic images from block-based stereoscopic image format
CN102045578B (zh) 图像处理设备和图像处理方法
US20110249091A1 (en) Video signal processing apparatus and video signal processing method
WO2012111757A1 (ja) 画像処理装置および画像処理方法
US20110149020A1 (en) Method and system for video post-processing based on 3d data
US10122986B2 (en) Image processing device and image processing method
KR20150017350A (ko) 폐색 맵의 이용에 기초한 3차원 비디오 스트림의 생성 및 복원 방법, 및 그 대응 생성 및 복원 디바이스
CN102342122A (zh) 影像信号处理装置和影像信号处理方法
JP5066041B2 (ja) 画像信号処理装置、画像信号処理方法
JP4235209B2 (ja) 動きベクトル検出装置および動きベクトル検出方法
US20130194383A1 (en) Image transmission device and method, and image reproduction device and method
KR100416557B1 (ko) 부분 인터레이스 동영상 재생 방법 및 그 장치
JP2011199889A (ja) 映像信号処理装置、及び、映像信号処理方法
TW201208344A (en) System and method of enhancing depth of a 3D image
JP2007336239A (ja) デジタル放送受信装置及びデジタル放送信号の保存・再生方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20120201