CN102970565A - 视频处理装置及视频处理方法 - Google Patents

Abstract

本发明提供了一种视频处理装置及视频处理方法，其对优先度高的观众总是能够显示高质量的立体视频。实施方式涉及视频处理装置包括：观众检测部，使用由摄影机拍摄到的视频进行脸部识别，以取得观众的位置信息；观众选择部，基于规定的优先度评定规则，对所述观众评定优先度，从所述观众中按优先度由高到低的顺序选择规定人数的观众；视域信息计算部，使用选择的所述观众的位置信息，计算用于设定纳入选择的所述观众的视域的控制参数；视域控制部，根据所述控制参数控制视域；显示部，显示位于所述视域内的观众能作为立体视频观看的多个视差图像；以及开口控制部，沿规定方向输出在所述显示部显示的多个视差图像。

Description

视频处理装置及视频处理方法

相关申请的交叉参考

本申请基于2011年8月31日申请的日本专利申请2011-189548，从该申请享受优先权权益。本申请参照该申请，包括该申请的全部内容。

技术领域

本发明的实施方式涉及视频处理装置及视频处理方法。

背景技术

近年来，观众不使用特殊的眼镜而能够用裸眼观察到立体视频的立体视频显示装置(所谓裸眼3D电视)日益普及。该立体视频显示装置显示视点不同的多个图像。并且，这些图像的光线例如由视差屏障(parallaxbarrier)、柱面透镜(lenticular lens)等控制输出方向，并导入观众的两眼。只要观众的位置适当，则观众就能用左眼和右眼观察到不同的视差图像，从而能立体地识别视频。将这样的观众能观察到立体视频的区域称为视域。

该视域是受限的区域，观众在处于视域之外的情况下不能够看到立体视频。因此，立体视频显示装置具有检测观众的位置并以观众进入视域内的方式控制视域的功能(人脸追踪功能)。

然而，在存在多个观众的情况下，并不是全部的观众都纳入视域内。另一方面，观众之中，存在应该优先纳入视域内的人以及不能纳入视域内的人。例如，仅仅通过立体视频显示装置前的人不需要优先纳入视域内。

发明内容

本发明鉴于上述问题，其目的在于提供对优先度高的观众总是能显示高质量的立体视频的视频处理装置及视频处理方法。

依据实施方式，该视频处理装置包括：观众检测部，使用由摄影机拍摄到的视频进行脸部识别，以取得观众的位置信息；观众选择部，在所述观众是多个的情况下，基于规定的优先度评定规则，对多个所述观众评定优先度，从多个所述观众中按优先度由高到低的顺序选择规定人数的观众；视域信息计算部，使用选择的所述观众的位置信息，计算用于设定纳入选择的所述观众的视域的控制参数；视域控制部，根据所述控制参数控制视域；显示部，显示位于所述视域内的观众能作为立体视频观看的多个视差图像；以及开口控制部，沿规定方向输出在所述显示部显示的多个视差图像。

依据上述结构的视频处理装置，对优先度高的观众总是能够显示高质量的立体视频。

附图说明

图1是一种实施方式涉及的视频处理装置100的外观图。

图2是示出一种实施方式涉及的视频处理装置100的概略结构的框图。

图3的(a)～(c)是从上方观察液晶面板1及柱面透镜2的一部分的图。

图4是示出视频处理装置的视听区域P中的多个视域21的一个例子的俯视图。

图5是示出变形例涉及的视频处理装置100’的概略结构的框图。

图6是示出一种实施方式涉及的视频处理方法的流程图。

图7的(a)～(c)是示出利用一种实施方式涉及的视频处理方法设定的视域的俯视图。

图8的(a)～(c)是用于说明通过优先度评定规则对观众评定优先度的图。

具体实施方式

以下，在参照附的同时，对本发明的实施方式具体地进行说明。

图1是一种实施方式涉及的视频显示装置100的外观图，图2是示出其概略结构的框图。视频显示装置100具备液晶面板1、柱面透镜2、摄影机3、受光部4和控制器10。

液晶面板(显示部)1显示处于视域内的观众能作为立体视频观看的多个视差图像。该液晶面板1是例如55英寸大小的面板，在水平方向上配置有11520(＝1280×9)个像素、在垂直方向上配置有720个像素。另外，各像素内沿垂直方向形成有三个子像素、即R子像素、G子像素及B子像素。从设置于背面的背光装置(未图示)向液晶面板1照射光。各像素使与从控制器10供给的视差图像信号(后述)相对应的亮度的光透过。

柱面透镜(开口控制部)2沿规定方向输出在液晶面板1(显示部)上显示的多个视差图像。该柱面透镜2具有沿着液晶面板1的水平方向配置的多个凸部，其数量是液晶面板1的水平方向像素数的1/9。而且，以沿水平方向配置的每九个像素对应一个凸部的方式，将柱面透镜2粘贴至液晶面板1的表面。透过各像素的光从凸部的顶点附近带着指向性地输出至指定的方向。

本实施方式的液晶面板1能够以三视差以上的多视差方式(积分图像(integral image)方式)或二视差方式显示立体视频，此外，也能显示通常的二维视频。

在以下的说明中，说明对应液晶面板1的各凸部设置九个像素且能采用九视差的多视差方式的例子。在多视差方式中，在与各凸部对应的九个像素分别显示第一视差图像～第九视差图像。第一视差图像～第九视差图像是指从沿着液晶面板1的水平方向并排的九个视点分别观察被拍摄对象而得到的图像。观众通过经由柱面透镜2，分别以左眼观察第一视差图像～第九视差图像中的一个视差图像，以右眼观察另一个视差图像，从而能够立体地观看视频。若采用多视差方式，则视差的数量越增加，越能够扩展视域。视域是指在从液晶面板1的前方观察液晶面板1时能立体观看视频的区域。

另一方面，在二视差方式中，分别在与各凸部对应的九个像素中的四个像素显示右眼用视差图像、在其他五个像素显示左眼用视差图像。左眼用及右眼用视差图像是指从沿水平方向并排的两个视点中的左侧的视点及右侧的视点分别观察被拍摄对象而得到的图像。观众通过经由柱面透镜2分别以左眼看左眼用视差图像、以右眼看右眼用视差图像，从而能够立体地观看视频。采用二视差方式时，显示的视频的立体感比多视差方式更容易得到，但与多视差方式相比视域变窄。

此外，液晶面板1在与各凸部对应的九个像素显示相同的图像，也能够显示二维图像。

另外，在本实施方式中，根据柱面透镜2的凸部和显示的视差图像之间的相对位置关系、即在与各凸部对应的九个像素如何显示视差图像，从而能够可变控制视域。以下，以多视差方式为例对视域的控制进行说明。

图3是从上方观察液晶面板1及柱面透镜2的一部分的图。图3的阴影的区域表示视域，当从视域看液晶面板1时能够立体地观看视频。其他区域是产生逆视、交调失真的区域，且是难以立体地观看视频的区域。

图3示出了液晶面板1和柱面透镜2之间的相对位置关系，更具体地说示出了液晶面板1和柱面透镜2的距离、或者视域随液晶面板1和柱面透镜2的水平方向的偏移量而变化的情况。

实际上，柱面透镜2与液晶面板1高精度地对位而粘贴，因而难以物理地变更液晶面板1和柱面透镜2之间的相对位置。

因此，在本实施方式中，通过使在液晶面板1的各像素显示的第一视差图像～第九视差图像的显示位置偏移，从而表面上使液晶面板1和柱面透镜2之间的相对位置关系变化，由此进行视域的调整。

例如，与分别将第一视差图像～第九视差图像显示在与各凸部对应的九个像素的情况(图3的(a))相比，在使视差图像整体向右侧偏移显示的情况下(图3的(b))，视域向左侧移动。相反地，在使视差图像整体向左侧偏移显示的情况下，视域向右侧移动。

另外，在水平方向的中央附近中，不使视差图像偏移，在越向液晶面板1的外侧、使视差图像向外侧越大偏移以进行显示的情况下(图3的(c))，视域沿接近液晶面板1的方向移动。此外，偏移的视差图像和不偏移的视差图像之间的像素、偏移的量不同的视差图像间的像素只要根据周围的像素进行适当内插即可。另外，与图3的(c)相反，在水平方向的中央附近不使视差图像偏移，在越向液晶面板1的外侧、使视差图像向中心侧越大地偏移以进行显示的情况下，视域沿远离液晶面板1的方向移动。

这样，通过偏移视差图像的整体或者一部分，从而能够使视域相对液晶面板1沿左右方向或者前后方向移动。在图3中为了简化说明，仅示出一个视域，但实际上，如图4所示，多个视域21存在于视听区域P，他们连动地移动。视域受后述图2的控制器10控制。此外，视域21以外的视听区域是因逆视、交调失真等的产生而难以看到良好的立体视频的逆视区域22。

回到图1，对视频处理装置100的各构成要素进行说明。

摄影机3在液晶面板1的下部中央附近以规定仰角被安装，以拍摄液晶面板1的前方的规定范围。拍摄到的视频被提供给控制器10，用于检测观众的位置、观众的脸部等与观众相关的信息。摄影机3也可拍摄动态图像和静态图像中的任一种。

受光部4例如设于液晶面板1的下部的左侧。而且，受光部4接收从观众使用的遥控器发送的红外线信号。该红外线信号包括表示是显示立体视频还是二维视频、在显示立体视频的情况下采用多视差方式及二视差方式的哪一种、是否进行视域的控制等的信号。

接着，对控制器10的构成要素的详细进行说明。如图2所示，控制器10具有调谐解码器11、视差图像转换部12、观众检测部13、视域信息计算部14、图像调整部15、观众选择部16和存储部17。控制器10例如被安装作为一个IC(Integrated Circuit：集成电路)，其被配置于液晶面板1的背侧。当然，也可通过软件的方式安装控制器10的一部分。

调谐解码器(接收部)11接收输入的广播波并选频，解码被编码的视频信号。在向广播波叠加有电子节目表(EPG)等的数据广播的信号的情况下，调谐解码器11提取它。或者，调谐解码器11不是从广播波而是从光盘再生装置、个人计算机等的视频输出设备接收被编码的视频信号，并对其解码。解码的信号也称为基带视频信号，且被提供给视差图像转换部12。此外，在视频显示装置100不接收广播波、专门显示从视频输出设备接收的视频信号的情况下，也可以将调谐解码器11取而代之地设置仅具有解码功能的解码器作为接收部。

调谐解码器11接收的视频信号可以是二维视频信号，也可以是以帧封装(FP)、并排(SBS)或者上下(TAB)方式等包括左眼用及右眼用的图像的三维视频信号。另外，视频信号也可以是包括三视差以上的图像的三维视频信号。

视差图像转换部12为了立体地显示视频，而将基带视频信号转换为多个视差图像信号后供给至图像调整部15。视差图像转换部12根据采用多视差方式和二视差方式中的哪一种而处理内容不同。另外，根据基带视频信号是二维视频信号还是三维视频信号，视差图像转换部12的处理内容不同。

在采用二视差方式的情况下，视差图像转换部12生成与左眼用及右眼用视差图像分别对应的左眼用及右眼用视差图像信号。更具体而言，如下所述。

在采用二视差方式且输入了包括左眼用及右眼用的图像的三维视频信号的情况下，视差图像转换部12生成能在液晶面板1显示的形式的左眼用及右眼用视差图像信号。另外，在输入包括三个以上的图像的三维视频信号的情况下，例如视差图像转换部12使用其中的任意的两个，生成左眼用及右眼用视差图像信号。

相对于此，在采用二视差方式且输入了不包括视差信息的二维视频信号的情况下，视差图像转换部12基于视频信号中的各像素的深度值生成左眼用及右眼用视差图像信号。深度值是表示看到各像素相对于液晶面板1位于眼前或纵深哪种程度的值。深度值也可预先评定给视频信号，也可基于视频信号的特征进行动态检测、构图识别及人的脸部检测等以生成深度值。在左眼用视差图像中，需要眼前观察到的像素比纵深观察到的像素偏向右侧地显示。因此，视差图像转换部12进行将视频信号中的眼前观察到的像素向右侧偏移的处理，生成左眼用视差图像信号。深度值越大偏移量越大。

另一方面，在采用多视差方式的情况下，视差图像转换部12生成与第一视差图像～第九视差图像分别对应的第一视差图像～第九视差图像信号。更具体而言，如下所述。

在采用多视差方式且输入了包括二维视频信号或八视差以下的图像的三维视频信号的情况下，视差图像转换部12与根据二维视频信号生成左眼用及右眼用视差图像信号同样地基于纵深信息，生成第一视差图像～第九视差图像信号。

在采用多视差方式且输入了包括九视差的图像的三维视频信号的情况下，视差图像转换部12使用其视频信号生成第一视差图像～第九视差图像信号。

观众检测部13使用由摄影机3拍摄到的视频进行脸部识别，取得观众的信息(例如、观众的脸部信息、位置信息。以下总称为“观众识别信息”。)，供给至后述的观众选择部16。即使观众运动，观众检测部13也能追踪，从而能够掌握每一个观众的视听时间。

观众的位置信息显示作为例如以液晶面板1的中央为原点的X轴(水平方向)、Y轴(垂直方向)及Z轴(与液晶面板1正交的方向)上的位置。图4所示的观众20的位置用坐标(X1，Y1，Z1)表示。更具体而言，观众检测部13首先通过从用摄影机3拍摄到的视频检测脸部来识别观众。接下来，观众检测部13从视频中的观众的位置计算X轴及Y轴上的位置(X1，Y1)，根据脸部的大小计算Z轴上的位置(Z1)。在有多个观众的情况下，观众检测部13也可检测预先确定的数量例如有10位观众。在该情况下，检测到的脸部的数量比10大时，按照例如离液晶面板1近、即Z轴上的位置由小到大的顺序检测10位观众的位置。

视域信息计算部14使用由后述的观众选择部16选择的观众的位置信息，计算用于设定纳入选择的观众的视域的控制参数。该控制参数例如是在图3所说明的使视差图像偏移的量，其是一个参数、或多个参数的组合。而且，视域信息计算部14将计算出的控制参数供给至图像调整部15。

更详细而言，为了设定想要的视域，视域信息计算部14使用将控制参数、和用该控制参数设定的视域对应的视域数据库。该视域数据库被预先存储于存储部17。视域信息计算部14通过检索视域数据库，以找出能纳入选择的观众的视域。

另外，在没有观众被观众选择部16选择的情况下，视域信息计算部14计算用于设定将尽可能多的观众纳入视域内的视域的控制参数。

图像调整部(视域控制部)15为了控制视域，而在根据计算出的控制参数对视差图像信号进行偏移或内插的调整后，将其供给至液晶面板1。液晶面板1显示与调整后的视差图像信号对应的图像。

观众选择部16基于用于对观众评定优先度的优先度评定规则，向被观众检测部13检测出的观众评定优先度。然后，观众选择部16从观众中按优先度由高到低的顺序选择规定人数(一个或多个)的观众，将选择出的观众的位置信息供给至视域信息计算部14。

此外，优先度评定规则可以被预先设定，可以由用户根据菜单画面等从多个优先度评定规则中选择想要的规则，也可在制品出货时设定规定优先度评定规则。

另外，在未设定优先度评定规则的情况下，观众选择部16向视域信息计算部14通知表示不选择观众为内容的不选择观众通知。

存储部17是闪存等的非易失性存储器，其除了存储视域数据库外，还存储有后述的用户注册信息、3D优先观众信息、初始视听位置等。此外，该存储部17也可设于控制器10的外部。

以上，已经对视频处理装置100的结构进行了说明。在本实施方式中示出了通过使用柱面透镜2使视差图像偏移以控制视域的例子，但也可用其他方法控制视域。例如，也可代替柱面透镜2而将视差屏障设置作为开口控制部2’。图5是示出作为图2所示的本实施方式的变形例的视频处理装置100’的概略结构的框图。如图5所示，视频处理装置100’的控制器10’具备视域控制部15’，以取代图像调整部15。该视域控制部15’根据利用视域信息计算部14计算出的控制参数控制开口控制部2’。在本变形例的情况下，控制参数是液晶面板1和开口控制部2’之间的距离、液晶面板1和开口控制部2’在水平方向的偏移量等。

在本变形例中，通过以开口控制部2’控制在液晶面板1显示的视差图像的输出方向来控制视域。这样，也可不进行使视差图像偏移的处理而利用视域控制部15’控制开口控制部2’。

接着，使用图6的流程图，对采用如上所述构成的视频处理装置100(100’)的视频处理方法进行说明。

(1)观众检测部13使用由摄影机3拍摄到的视频进行脸部识别，获取观众识别信息(步骤S1)。

(2)观众检测部13判定观众是否是多个(步骤S2)。其结果是，若观众是一人，则观众检测部13将该观众的观众识别信息供给至观众选择部16。另一方面，若观众是多个人，则观众检测部13将检测到的多个观众的观众识别信息全部供给至观众选择部16。

(3)观众选择部16在从观众检测部13仅供给一人量的观众位置信息的情况下，选择该观众(一人)，并将该观众的观众识别信息供给至视域信息计算部14(步骤S3)。

(4)视域信息计算部14计算控制参数(步骤S4)，该控制参数用于设定将所选择的观众(一人)纳入看得到最高质量的立体视频的位置(例如，视域的中心。以下同样。)的视域。

(5)观众选择部16在观众为多个的情况下，判定是否设定有用于对观众评定优先度的优先度评定规则(步骤S5)。

(6)在未设定优先度评定规则的情况下，观众选择部16将不选择观众的内容通知给视域信息计算部14(步骤S6)。

(7)视域信息计算部14计算用于设定纳入尽可能多的观众的视域的控制参数(步骤S7)。

(8)观众选择部16基于优先度评定规则向观众评定优先度，从观众中按优先度由高到低的顺序选择规定人数的观众，并将所选择的观众的观众识别信息(位置信息)供给至视域信息计算部14(步骤S8)。

关于对检测到的观众评定优先度的具体的方法，例如在使位于液晶面板1的正面方向的观众优先的优先度评定规则的情况下，观众选择部16使用从观众检测部13供给的观众的位置信息，按照从位于液晶面板1的正面方向的观众到位于偏斜方向的观众的顺序评定高优先度。然后，观众选择部16按照优先度最高的观众的顺序选择规定人数(一个或多个)的观众。此外，优先度评定规则除此以外还假设有各种规则，后面一并说明其他具体例。

(9)视域信息计算部14计算用于设定将所选择的观众纳入视域内的视域的控制参数(步骤S9)。

此外，在视域内不能够纳入所选择的全体观众的情况(即不能够找到纳入所选择的全体观众的视域的情况)下，视域信息计算部14计算控制参数，该控制参数用于设定将按优先度最高的观众的顺序纳入尽可能多的选择的观众的视域。例如，首先，除了选择的观众中优先度最低的观众以外，尝试计算用于设定将剩余的观众全部纳入视域内的视域的控制参数。在即使这样也不能够计算控制参数的情况下，除剩余的观众中优先度最低的观众以外，尝试计算控制参数。通过重复此计算，总是能将优先度高的观众纳入视域内。

另外，视域信息计算部14也可不论选择的观众全体是否纳入视域内而计算控制参数，该控制参数用于设定将所选择的观众中评定了最高优先度的观众纳入看得到最高质量的立体视频的位置的视域。

此外，视域信息计算部14也可在由观众选择部16选择的观众的数量是一人的情况下，计算用于设定将该观众纳入看得到最高质量的立体视频的位置的视域的控制参数。

(10)图像调整部15使用步骤S4、步骤S7或步骤S9中计算出的控制参数调整图像(视差图像信号)，并供给至液晶面板1(步骤S10)。

此外，在变形例涉及的视频处理装置100’的情况下，视域控制部15’使用步骤S4、步骤S7或步骤S9中计算出的控制参数，控制开口控制部2’。

(11)液晶面板1显示在步骤S10中由图像调整部15调整后的图像(步骤S11)。

此外，在变形例涉及的视频处理装置100’的情况下，液晶面板1显示从视差图像转换部12供给的图像。

接着，使用图7的(a)、(b)及(c)，对采用上述视频处理方法的视域的设定进行具体说明。

图7的(a)、(b)及(c)示出视频处理装置100(100’)、观众(四人)和设定的视域(Sa，Sb，Sc)。各图之间，观众的数量及位置相同。另外，对观众标记的字母表表示优先度，优先度按A、B、C、D的顺序变高。

图7的(a)示出经过步骤S6及步骤S7设定的视域的一个例子。如图7的(a)所示，三个观众进入视域Sa内。在该情况下，由于未设定优先度评定规则，所以不考虑观众的优先度，以最大化纳入视域内的观众的数量的方式设定视域。

图7的(b)及(c)示出经过步骤S8及步骤S9设定的视域。在图7的(b)中，与图7的(a)相比，纳入视域的观众的人数减少，但优先度较高的两个观众进入视域Sb。另外，在图7的(c)中，与图7的(b)相比，纳入视域内的人数进一步减少，但优先度最高的观众位于视域的中心的方式设定视域Sc。

接着，列举优先度评定规则的具体例(a)～(h)。

(a)与液晶面板1的端部相比，位于正面的观众的一方具有较高的视听积极性的可能性较大。因此，如图8的(a)所示，在本优先度评定规则中，按从位于液晶面板1的正面方向的观众到位于液晶面板1的端部的观众的顺序评定高的优先度。

在采用本优先度评定规则的情况下，观众选择部16例如使用观众的位置信息，求出液晶面板1的显示面、和通过观众及液晶面板1的中心的垂直方向的面所成的角度(最大90°)，从该角度较大的观众开始依次评定较高的优先度。

(b)使在能看到立体视频的基础上接近最佳的视听距离(液晶面板1和观众之间的距离)的观众优先。如图8的(b)所示，在本优先度评定规则中，从在能看到立体视频的基础上视听距离接近最佳视听距离(最佳视听距离d)的观众开始依次评定高优先度。此外，最佳视听距离d的值依赖于液晶面板的尺寸等的各种参数，因而被设定为针对每个视频处理装置的制品而不同的值。

在采用本优先度评定规则的情况下，观众选择部16求出观众的位置信息中含有的Z轴上的位置和最佳视听距离d之差，并从该差较小的观众开始依次评定较高的优先度。

(c)视听时间越长的观众，对该节目具有较高的视听积极性的可能性越大。因此，在本优先度评定规则中，从视听时间较长的观众开始评定较高的优先度。视听时间例如以视听中的节目的开始时间为基准进行计算。视听中的节目的开始时间能从电子节目表(EPG)等取得。另外，视听时间也可以对视听中的节目进行选频的时间为基准来计算。另外，视听时间也可以视频显示装置100的电源被接入并开始视频显示的时间为基准来计算。

在采用本优先度评定规则的情况下，观众选择部16针对每个观众计算视听时间，并从视听时间较长的观众开始依次评定高优先度。

(d)持有遥控器的观众操作遥控器以选择视听频道，因而是中心观众的可能性较大。因此，在本优先度评定规则中，对持有遥控器的观众、或最接近遥控器的观众评定最高的优先度。

在采用本优先度评定规则的情况下，观众检测部13识别持有遥控器的观众，将该观众的观众识别信息供给至观众选择部16。作为持有遥控器的观众的识别方法，存在以下等方法：用摄影机3检测从遥控器发出的红外线或在遥控器预先设定的记号，以识别离遥控位置最近的观众的方法、或利用图像识别直接识别持有遥控器的观众的方法。而且，观众选择部16对持有遥控器的观众评定最高的优先度。此外，观众选择部16也可对除持有遥控器的观众以外的观众，例如从最接近遥控器的观众开始依次评定较高的优先度。

(e)与能将视频处理装置100的用户有关的信息作为用户注册信息存储于存储部17。该用户注册信息除了名字、脸部照片之外，还能够包括年龄、身高、表示视听立体视频的优先度的3D视听优先度等的信息。在本优先度评定规则中，使该3D视听优先度较高的观众优先。

在采用本优先度评定规则的情况下，观众检测部13从用摄影机3拍摄到的视频取得各观众的脸部信息。而且，观众检测部13通过对各个观众检索与脸部信息匹配(matching)的用户注册信息的脸部照片，从而从存储部17读出该观众的3D视听优先度。而且，观众检测部13对应各观众将组合位置信息和3D视听优先度而得的信息供给至观众选择部16。观众选择部16基于从观众检测部13供给的信息，从3D视听优先度高的观众开始依次评定高的优先度。此外，也可对没有用户注册信息的观众评定低(或者最低)的优先度。

(f)视频显示装置100具有将摄影机3拍摄到的视频(以下也称为“摄影机视频”。)显示于液晶面板1的功能。如图8的(c)所示，在摄影机视频中，能够在识别出的观众的脸部附加框模式，以选择指定的观众。在本优先度评定规则中，对在摄影机视频上选择的观众评定高优先度。

更详细而言，用户在摄影机视频上选择一个观众。由此，将选择的观众的脸部信息作为3D优先观众信息保存于存储部17。此外，能够在摄影机视频上变更观众的选择。而且，如果存在与保存于存储部17的3D优先观众信息的脸部信息一致的观众，则观众选择部16对该观众评定最高的优先度。

此外，如图8的(c)所示，能在摄影机视频上对多个观众评定优先次序以便进行选择。在该情况下，观众选择部16利用在摄影机视频上评定的优先次序对观众评定优先度。这样，基于3D优先观众信息对观众评定优先度。

(g)根据视频处理装置100及沙发、椅子等的家具的配置状况，假设不是从液晶面板1的正面而是从偏斜方向视听较多的情况。在那样的情况下，视域沿液晶面板1的偏斜方向设定的频率变高。因此，在本优先度评定规则中，使位于频繁地设定为视域的场所的观众优先。

在采用本优先度评定规则的情况下，视域信息计算部14例如在每次计算控制参数时都将计算出的控制参数保存于存储部17。而且，观众选择部16根据保存于存储部17的控制参数指定设定次数多的视域，对位于该视域内的观众评定比位于该视域外的观众高的优先度。

(h)视频处理装置100的用户也能将最容易视听的位置等设定为初始视听位置。在本优先度评定规则中，用户预先设定初始视听位置，并使用位于该初始视听位置的观众优先。

在采用本优先度评定规则的情况下，存储部17保存与用户设定了的初始视听位置相关的信息。观众选择部16从存储部17读出设定的初始视听位置，并对位于该视听位置的观众评定高优先度。

如上所述，依据本实施方式涉及的视频处理装置及视频处理方法，即使是存在多个观众且观众的一部分未纳入视域内的情况，通过将优先度高的观众必须纳入视域内，从而高优先度的观众能够看到高质量的立体视频。

此外，在本实施方式中，在设定有优先度评定规则的情况下，以将优先度高的观众纳入视域内的方式控制视域。因此，结果能够提高人脸追踪的性能。也就是说，例如在尽管没有观众，但观众检测部误检测到观众的情况下，在通常的人脸追踪中导致对这样的观众调整视域。相对于此，依据本实施方式，若采用使用户注册信息的3D视听优先度高的观众、在摄影机视频上选择的观众优先的优先度评定规则等，则能忽略如上所述的观众，从而能够适当地进行视域的调整。

虽然说明了本发明的几个实施方式，但这些的实施方式是作为例子而提示的，并非意在限定发明的范围。这些实施方式能以其他的各种方式实施，能够在不脱离发明的思想的范围内进行各种的省略、替换、变更。这些实施方式或其变形，包含于发明的范围、思想，同样也包含于权利要求书所记载的发明和其等价的范围内。

Claims (20)

1.一种视频处理装置，其特征在于，包括：

观众检测部，使用由摄影机拍摄到的视频进行脸部识别，以取得观众的位置信息；

观众选择部，在所述观众是多个的情况下，基于规定的优先度评定规则，对多个所述观众评定优先度，从多个所述观众中按优先度由高到低的顺序选择规定人数的观众；

视域信息计算部，使用选择的所述观众的位置信息，计算用于设定纳入选择的所述观众的视域的控制参数；

视域控制部，根据所述控制参数控制视域；

显示部，显示位于所述视域内的观众能作为立体视频观看的多个视差图像；以及

开口控制部，沿规定方向输出在所述显示部显示的多个视差图像。

2.根据权利要求1所述的视频处理装置，其特征在于，

所述视域信息计算部在不能将选择的所述观众全体纳入视域内的情况下，计算用于设定从优先度最高的观众开始依次纳入尽可能多的选择的所述观众的视域的控制参数。

3.根据权利要求1所述的视频处理装置，其特征在于，

所述视域信息计算部计算用于设定将选择的所述观众中的评定为最高优先度的观众纳入能看到最高质量的立体视频的位置的视域的控制参数。

4.根据权利要求1所述的视频处理装置，其特征在于，

在未设定所述优先度评定规则的情况下，所述观众选择部向所述视域信息计算部通知内容为不选择观众的不选择观众通知，

所述视域信息计算部在接收到所述不选择观众通知的情况下，计算用于设定纳入尽可能多的多个所述观众的视域的控制参数。

5.根据权利要求1所述的视频处理装置，其特征在于，

所述视域信息计算部在由所述观众检测部检测到的观众的数量、或由所述观众选择部选择的观众的数量是一人的情况下，计算用于设定将该观众纳入能看到最高质量的立体视频的位置的视域的控制参数。

6.根据权利要求1所述的视频处理装置，其特征在于，

所述观众选择部按照从位于所述显示部的正面的观众到位于所述显示部的端部的观众的顺序评定高优先度。

7.根据权利要求1所述的视频处理装置，其特征在于，

所述观众选择部从视听距离离最佳视听距离近的观众开始依次评定为高的优先度，所述视听距离是所述显示部和所述观众之间的距离，所述最佳视听距离是在观看立体视频上最佳的视听距离。

8.根据权利要求1所述的视频处理装置，其特征在于，

所述观众选择部从视听时间长的观众开始依次评定高的优先度。

9.根据权利要求1所述的视频处理装置，其特征在于，

所述观众选择部对持有遥控器的观众、或最接近遥控器的观众评定最高的优先度。

10.根据权利要求1所述的视频处理装置，其特征在于，

所述视频处理装置还包括：存储部，所述存储部保存包括用户的脸部照片及3D视听优先度的用户注册信息，

所述观众检测部从由所述摄影机拍摄到的视频分别取得多个所述观众的脸部信息，且通过对各个所述观众检索与所述脸部信息匹配的所述用户注册信息的脸部照片，从所述存储部读出该观众的所述3D视听优先度，

所述观众选择部从所述3D视听优先度高的观众开始依次评定高的优先度。

11.根据权利要求1所述的视频处理装置，其特征在于，

所述视频处理装置还包括：存储部，所述存储部将由所述摄影机拍摄到的视频、即摄影机视频上选择的观众的脸部信息作为3D优先观众信息加以保存，

所述观众选择部基于在所述存储部保存的所述3D优先观众信息，对多个所述观众评定优先度。

12.根据权利要求1所述的视频处理装置，其特征在于，

所述视频处理装置还包括：存储部，所述存储部保存所述视域信息计算部计算出的所述控制参数，

所述观众选择部根据在所述存储部保存的控制参数指定设定次数多的视域，并对位于该视域内的观众评定比位于该视域外的观众高的优先度。

13.根据权利要求1所述的视频处理装置，其特征在于，

所述视频处理装置还包括：存储部，所述存储部保存与用户设定的初始视听位置相关的信息，

所述观众选择部从所述存储部读出所述初始视听位置，并对位于该视听位置的观众评定高的优先度。

14.根据权利要求1所述的视频处理装置，其特征在于，

所述视域控制部

根据所述控制参数，调整在所述显示部显示的多个所述视差图像的显示位置，或

根据所述控制参数，控制在所述显示部显示的多个所述视差图像的输出方向。

15.一种视频处理方法，其特征在于，包括：

使用由摄影机拍摄到的视频进行脸部识别，以取得观众的位置信息；

在所述观众是多个的情况下，基于规定的优先度评定规则，向多个所述观众评定优先度，从多个所述观众中按优先度由高到低的顺序选择规定人数的观众；

使用选择的所述观众的位置信息，计算用于设定纳入选择的所述观众的视域的控制参数；以及

根据所述控制参数控制视域。

16.根据权利要求15所述的视频处理方法，其特征在于，

在不能将选择的所述观众全体纳入视域内的情况下，计算用于设定从优先度最高的观众开始依次纳入尽可能多的选择的所述观众的视域的控制参数。

17.根据权利要求15所述的视频处理方法，其特征在于，

计算用于设定将选择的所述观众中的评定有最高优先度的观众纳入能看到最高质量的立体视频的位置的视域的控制参数。

18.根据权利要求15所述的视频处理方法，其特征在于，

在未设定所述优先度评定规则的情况下，计算用于设定纳入尽可能多的多个所述观众的视域。

19.根据权利要求15所述的视频处理方法，其特征在于，

所述视频处理方法还包括：将包括用户的脸部照片及3D视听优先度的用户注册信息预先保存于存储部，

从由所述摄影机拍摄到的视频分别取得多个所述观众的脸部信息，且通过对各个所述观众检索与所述脸部信息匹配的所述用户注册信息的脸部照片，从所述存储部读出该观众的所述3D视听优先度，

从所述3D视听优先度高的观众开始依次评定较高的优先度。

20.根据权利要求15所述的视频处理方法，其特征在于，

所述视频处理方法还包括：将由所述摄影机拍摄到的视频、即在摄影机视频上选择的观众的脸部信息作为3D优先观众信息预先保存于存储部，

基于在所述存储部保存的所述3D优先观众信息，对多个所述观众评定优先度。

Images