CN114390271B - 判别连续影像顺序的系统及其方法 - Google Patents
判别连续影像顺序的系统及其方法 Download PDFInfo
- Publication number
- CN114390271B CN114390271B CN202011118198.5A CN202011118198A CN114390271B CN 114390271 B CN114390271 B CN 114390271B CN 202011118198 A CN202011118198 A CN 202011118198A CN 114390271 B CN114390271 B CN 114390271B
- Authority
- CN
- China
- Prior art keywords
- image
- sequence
- pixel
- gray
- scale
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/349—Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking
- H04N13/354—Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking for displaying sequentially
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/385—Image reproducers alternating rapidly the location of the left-right image components on the display screens
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N17/00—Diagnosis, testing or measuring for television systems or their details
- H04N17/004—Diagnosis, testing or measuring for television systems or their details for digital television systems
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
本发明提供一种判别连续影像顺序的系统及判别连续影像顺序的方法，先假定当前影像为左眼影像，将左右眼影像转换为灰阶影像，再计算出左眼影像的方差值较大的像素，再将这些像素于各自对应的对极线上找右眼影像对应的的像素，再将左右眼影像对应的像素对于对极线上的坐标相减得到视差和，若视差和小于零则将左右眼影像顺序对换，如此能够不需使用者介入而自动判别左右眼影像的顺序，实现藉由立体视觉对应演算法来确定左右眼影像的顺序，使得实时运算效率高。
Description
技术领域
本发明涉及一种判别连续影像顺序的系统及其方法，尤其涉及一种自动判别3D连续画面顺序的系统及其方法。
背景技术
计算机输出连续帧的3D(3-dimension，三维)影像数据中无明确标记目前输出的帧是左眼影像或右眼影像。投影机在输出影像时只能任一猜测目前输出的帧是左眼影像,如果投影机猜错的话，则投影机输出的影像没有3D景深的效果。
一般的解决办法是在OSD(on-screen display，屏幕菜单式调节方式)会有一选项给用户有机会作左右影像的对调,或在3D眼镜上有左右影像切换的按钮可以手动切换左右影像切换，但是手动切换的方式使得使用者在使用3D产品时不便利。
因此，有必要设计一种新型的判别连续影像顺序的系统及其方法，以克服上述缺陷。
发明内容
本发明的目的在于提供一种判别连续影像顺序的系统及其方法，其能够不需使用者介入而自动判别左右眼影像的顺序。
为达到上述目的，本发明提供了一种判别连续影像顺序的方法，其特征在于，该方法包括：将第一影像转换为第一灰阶影像及将第二影像转换为第二灰阶影像；于该第一灰阶影像找到方差值不小于设定值的第一像素；以该第一像素为中心点延展得到第一区块，其中该第一像素位于第一对极线及该第一区块位于该第一灰阶影像的第一位置；于该第二灰阶影像使该第一区块沿着该第一对极线得到第二位置，使位于该第一位置的该第一方块与位于该第二位置的该第一方块的差异值最小；于该第二灰阶影像的该第一区块得到该第一对极线上的第二像素，使该第一像素具有的第一灰阶值与该第二像素具有的第二灰阶值的差的平方为最小；以及当该第一影像的顺序于该第二影像的顺序之前且第一视差小于零时，将该第一影像与该第二影像的顺序对换，其中该第一视差为该第一像素于该第一对极线具有的第一坐标与该第二像素于该第一对极线具有的第二坐标的差值。
较佳的，该方法还包括：于该第一灰阶影像找到方差值不小于该设定值的第三像素；以该第三像素为中心点延展第二区块得到第三值，其中该第三像素位于第二对极线及该第二区块位于该第一灰阶影像的第三位置；于该第二灰阶影像使该第二区块沿着该第二对极线得到第四位置，使位于该第三位置的该第二方块与位于该第四位置的该第二方块的差异值最小；于该第二灰阶影像的该第二区块得到该第二对极线上的第四像素，使该第三像素具有的第三灰阶值与该第四像素具有的第四灰阶值的差的平方为最小；以及当该第一影像的顺序于该第二影像的顺序之前且该第一视差与第二视差的和小于零时，将该第一影像与该第二影像的顺序对换，其中该第二对极线与该第一对极线平行，该第二视差为该第三像素于该第二对极线具有的第三坐标与该第四像素于该第二对极线具有的第四坐标的差值。
较佳的，该方法还包括：藉由第一取像单元撷取该第一影像；藉由第二取像单元撷取该第二影像，其中该第一取像单元与该第二取像单元位于同一水平线上，该同一水平线与该第一对极线平行。
较佳的，该差异值为位于该第一位置的该第一区块与位于该第二位置的该第一区块的每个对应像素的灰阶值相减的平方和。
较佳的，于该第一灰阶影像得到方差值最大为该设定值。
较佳的，该方法还包括：当该第一影像的顺序于该第二影像的顺序之前且该第一视差大于零时，维持该第一影像与该第二影像的顺序；当该第一影像的顺序于该第二影像的顺序之后且该第一视差小于零时，则维持该第一影像与该第二影像的的顺序；以及当该第一影像的顺序于该第二影像的顺序之后且该第一视差大于零时，则将该第一影像与该第二影像的顺序对换。
较佳的，该方法还包括：该第一影像为左眼影像且该第二影像为右眼影像；当该第一影像的顺序于该第二影像的顺序之前且该第一视差小于零时，则将该左眼影像与该右眼影像的顺序对换；当该第一影像的顺序于该第二影像的顺序之前且该第一视差大于零时，则维持该左眼影像与该右眼影像的顺序；当该第一影像的顺序于该第二影像的顺序之后且该第一视差小于零时，则维持该左眼影像与该右眼影像的顺序；以及当该第一影像的顺序于该第二影像的顺序之后且该第一视差大于零时，则将该左眼影像与该右眼影像的顺序对换。
本发明还提供了一种判别连续影像顺序的系统，其特征在于，该判别连续影像顺序的系统包括：第一取像单元，撷取第一影像；第二取像单元，撷取第二影像，该第二取像单元与该第一取像单元位于同一水平线上；处理单元，用于处理该第一影像及该第二影像；以及投影单元，与该处理单元通讯连接，该投影单元投射该第一影像及该第二影像；其中，该处理单元将该第一影像转换为第一灰阶影像及将该第二影像转换为第二灰阶影像；该处理单元于该第一灰阶影像找到方差值不小于设定值的第一像素；该处理单元以该第一像素为中心点延展第一区块得到第一值，其中该第一像素位于第一对极线及该第一区块位于该第一灰阶影像的第一位置；该处理单元于该第二灰阶影像使该第一区块沿着该第一对极线得到第二位置，使位于该第一位置的该第一方块与位于该第二位置的该第一方块的差异值最小；该处理单元于该第二灰阶影像的该第一区块得到该第一对极线上的第二像素，使该第一像素具有的第一灰阶值与该第二像素具有的第二灰阶值的差的平方为最小；当该第一影像的顺序于该第二影像的顺序之前且第一视差小于零时，该处理单元将该第一影像与该第二影像的顺序对换，其中该第一视差为该第一像素于该第一对极线具有的第一坐标与该第二像素于该第一对极线具有的第二坐标的差值。
较佳的，该处理单元于该第一灰阶影像找到方差值不小于该设定值的第三像素；该处理单元以该第三像素为中心点延展第二区块得到第三值，其中该第三像素位于第二对极线及该第二区块位于该第一灰阶影像的第三位置；该处理单元于该第二灰阶影像使该第二区块沿着该第二对极线得到第四位置，使位于该第三位置的该第二方块与位于该第四位置的该第二方块的差异值最小；该处理单元于该第二灰阶影像的该第二区块得到该第二对极线上的第四像素，使该第三像素具有的第三灰阶值与该第四像素具有的第四灰阶值的差的平方为最小；当该第一影像的顺序于该第二影像的顺序之前且该第一视差与第二视差的和小于零时，该处理单元将该第一影像与该第二影像的顺序对换，其中该第二对极线与该第一对极线平行，该第二视差为该第三像素于该第二对极线具有的第三坐标与该第四像素于该第二对极线具有的第四坐标的差值。
较佳的，当该第一影像的顺序于该第二影像的顺序之前且该第一视差大于零时，该处理单元维持该第一影像与该第二影像的顺序，该投影单元先投影该第一影像再投影该第二影像；当该第一影像的顺序于该第二影像的顺序之后且该第一视差小于零时，该处理单元维持该第一影像与该第二影像的的顺序，该投影单元先投影该第一影像再投影该第二影像；以及当该第一影像的顺序于该第二影像的顺序之后且该第一视差大于零时，该处理单元将该第一影像与该第二影像的顺序对换，该投影单元先投影该第二影像再投影该第一影像。
与现有技术相比，本发明实施例提供的一种判别连续影像顺序的系统及判别连续影像顺序的方法，先假定当前影像为左眼影像，将左右眼影像转换为灰阶影像，再计算出左眼影像的方差值较大的像素，再将这些像素于各自对应的对极线上找右眼影像对应的的像素，再将左右眼影像对应的像素对于对极线上的坐标相减得到视差和，若视差和小于零则将左右眼影像顺序对换，如此能够不需使用者介入而自动判别左右眼影像的顺序，实现藉由立体视觉对应演算法来确定左右眼影像的顺序，使得实时运算效率高。
附图说明
图1为本发明一实施例判别连续影像顺序的系统的示意图；
图2为本发明一实施例的影像原理图；
图3为本发明一实施例的像素原理图；
图4为本发明一实施例的区块的示意图；
图5为本发明一实施例的判别连续影像顺序的方法的流程图；
图6为本发明另一实施例的判别连续影像顺序的方法的流程图。
具体实施方式
为使对本发明的目的、构造、特征及其功能有进一步的了解，兹配合实施例详细说明如下。
请参照图1、图2、图3及图4所示，图1为本发明一实施例判别连续影像顺序的系统的示意图，图2为本发明一实施例的影像原理图，图3为本发明一实施例的像素原理图，图4为本发明一实施例的区块的示意图。本发明实施例提供的一种判别连续影像顺序的系统100，判别连续影像顺序的系统100包括处理单元101、投影单元102、第一取像单元O1及第二取像单元104，第一取像单元O1撷取第一影像11，第二取像单元104撷取第二影像12，第二取像单元104与第一取像单元O1位于同一水平线O1O2，处理单元101用于处理第一影像11及第二影像12，投影单元102用于投射第一影像11及第二影像12，投影单元102与处理单元101通讯连接，处理单元101将第一影像11转换为第一灰阶影像111及将第二影像12转换为第二灰阶影像121，处理单元101于第一灰阶影像111找到方差值不小于设定值103的第一像素1121，处理单元101以第一像素1121为中心点延展第一区块141得到第一值1111，其中第一像素1121位于第一对极线131及第一区块141位于第一灰阶影像111的第一位置A1，处理单元101于第二灰阶影像121使该第一区块141沿着第一对极线131得到第二位置A2，使位于第一位置A1的第一方块141与位于第二位置A2的第一方块141的差异值最小；处理单元101于第二灰阶影像121的第一区块141得到第一对极线131上的第二像素1221，使第一像素1121具有的第一灰阶值与该第二像素1221具有的第二灰阶值的差的平方为最小；当第一影像11的顺序于第二影像12的顺序之前且第一视差D1小于零时，处理单元101将第一影像11与第二影像12的顺序对换，投影单元102先投影第二影像12再投影第一影像11，其中第一视差D1为第一像素1121于第一对极线131具有的第一坐标X1与第二像素1221于第一对极线131具有的第二坐标X2的差值，如此，能够不需使用者介入而自动判别第一影像11与第二影像12的顺序，实现藉由立体视觉对应演算法来确定第一影像11与第二影像12的顺序，使得实时运算效率高。
参照图1～图4所示，第一取像单元O1为3D拍摄时的左相机，第二取像单元104为3D拍摄时的右相机，拍摄时左相机与右相机位于同一水平线O1O2，左相机拍摄得到的第一影像11，右相机拍摄得到的第二影像12，投影单元102投射第一影像11与第二影像12时无法判断投射的顺序，处理单元11会先判断第一影像11与第二影像12的顺序以便于投影单元102顺序投射第一影像11及第二影像12。
首先，处理单元101将第一影像11转换为第一灰阶影像111及将第二影像12转换为第二灰阶影像121，处理单元101于第一灰阶影像111找到方差值不小于设定值103的第一像素1121，处理单元101以第一像素1121为中心点延展第一区块141得到第一值1111，其中第一像素1121位于第一对极线131及第一区块141位于第一灰阶影像111的第一位置A1。其中，目标物P、第一取像单元O1及第二取像单元104形成的对极面PO1O2于第一影像11与第二影像12上相交形成第一对极线131，第一像素1121位于第一对极线131；第一区块141的中心点在第一对极线131上，以中心点延展形成第一区块141，例如以第一像素1121延展形成的第一区块141为7pixel*7pixel。换句话说，在第一灰阶影像111中找到强变异性的第一像素1121，于第一灰阶影像111内跳过平滑区域，也就是找到第一影像11的强变异性像素，以用于后续判断第一影像11与第二影像12的顺序。其中方差的计算方式为：假设第一灰阶影像111的分辨率为H*W，则m和n为正整数及i和j为正整数，然后方差为/>也具有更好的实施方式，于第一灰阶影像111得到最大的方差值为设定值103，即第一影像11上最强变异性像素，减小系统的运算量。
接着，处理单元101于第二灰阶影像121使该第一区块141沿着第一对极线131得到第二位置A2，使位于第一位置A1的第一方块141与位于第二位置A2的第二方块141的差异值最小。也就是说，在第一对极线131上找第二灰阶影像121对应的位于第二位置A2的第一区块131，在位于第一位置A1的第一方块141与位于第二位置A2的第二方块141的差异值为最小时，说明此时于第一灰阶影像111的位于第一位置A1的第一区块141与于第二灰阶影像121的位于第二位置A2的第一区块141的内容基本相同或者内容完全相同。其中差异值为位于第一位置A1的第一区块141与位于第二位置A2的第一区块141的每个对应像素的灰阶值相减的平方和。例如，第一区块141为Hpixel*Wpixel，Lm，n为位于第一位置A1的第一区块141的灰阶值，Rm，n为位于第二位置A2的第一区块141的灰阶值，差异值为m和n为正整数。
接着，处理单元101于第二灰阶影像121的第一区块141得到第一对极线131上的第二像素1221，使第一像素1121具有的第一灰阶值与该第二像素1221具有的第二灰阶值的差的平方为最小。也就是说，于第一灰阶影像111的第一区块141对于第二灰阶影像121的相同的第一对极线131上的每个像素进行运算得到第一像素1121对应的于第二灰阶影像121的第一区块141的第一对极线131上的每个像素的差异值，当差异值为最小时，即为第二像素1221，也就是于第一灰阶影像111的第一像素1121与第二灰阶影像121的第二像素1221为对应的像素。
最后，处理单元101获得第一像素1121于第一对极线131的第一坐标X1及获得第二像素1221于第一对极线131的第二坐标X2，当第一影像11的顺序于第二影像12的顺序之前且第一视差D1小于零时，处理单元101将第一影像11与第二影像12的顺序对换，投影单元102先投影第二影像12再投影第一影像11。具体来说，第一像素1121距离第一投影单元O1投影至第一影像11的点的距离为第一坐标X1，第二像素1221距离第二投影单元O2投影至第二影像12的点的距离为第二坐标X2，当第一影像11的顺序于第二影像12的顺序之前且第一视差D1＝X1-X2小于零时，说明此时第一影像11的顺序实际上于第二影像12的顺序之后，将第一影像11与第二影像12的顺序对换，然后投影单元102先投影第二影像12再投影第一影像11。
此外，当第一影像11的顺序于第二影像12的顺序之前且第一视差D1大于零时，处理单元101维持第一影像11与第二影像12的顺序，投影单元102先投影第一影像11再投影第二影像12；当第一影像11的顺序于第二影像12的顺序之后且第一视差D1小于零时，处理单元101维持第一影像11与第二影像12的顺序，投影单元102先投影第一影像11再投影第二影像12；当第一影像11的顺序于第二影像12的顺序之后且第一视差D1大于零时，处理单元101将第一影像11与第二影像12的顺序对换，投影单元102先投影第二影像12再投影第一影像11。
于本发明实施例中，第一影像11为左眼影像且第二影像12为右眼影像，当第一影像11的顺序于第二影像12的顺序之前且第一视差D1小于零时，则将左眼影像与右眼影像的顺序对换；当第一影像11的顺序于第二影像12的顺序之前且第一视差D1大于零时，则维持左眼影像与右眼影像的顺序；当第一影像111的顺序于第二影像2的顺序之后且第一视差D1小于零时，则维持左眼影像与右眼影像的顺序；当第一影像11的顺序于第二影像12的顺序之后且第一视差D1大于零时，则将左眼影像与右眼影像的顺序对换。具体来说，第一取像单元O1为3D拍摄时的左相机，第二取像单元104为3D拍摄时的右相机，左相机拍摄得到的左眼影像，右相机拍摄得到的右眼影像。
于本发明实施例中，处理单元101于第一灰阶影像111找到方差值不小于设定值103的第三像素1122；处理单元101以第三像素1122为中心点延展第二区块142得到第三值1112，其中第三像素1122位于第二对极线132及第二区块142位于第一灰阶影像111的第三位置A3；处理单元101于第二灰阶影像121使第二区块142沿着第二对极线132得到第四位置A4，使位于第三位置A3的第二方块142与位于第四位置A4的第二方块142的差异值最小，差异值的计算方式为位于第三位置A3的第二方块142与位于第四位置A4的第二方块142的每个对应像素的灰阶值相减的平方和；处理单元101于第二灰阶影像121的第一二区块142得到第二对极线132上的第四像素1222，使第三像素1122具有的第三灰阶值与该第四像素1222具有的第四灰阶值的差的平方为最小；当第一影像11的顺序于第二影像12的顺序之前且第一视差D1与第二视差D2的和小于零时，处理单元101将第一影像11与第二影像12的顺序对换，投影单元102先投影第二影像12再投影第一影像11；其中第二对极线132与同一水平线平行O1O2，第二视差D2为第三像素1122于第二对极线132具有的第三坐标X3与第四像素1222于第二对极线132具有的第四坐标X4的差值。具体来说，于第一灰阶影像111找到G(G为大于1的正整数)个强变异性的像素，通过如上的找寻方法于第二灰阶影像121找到一一对应的G个像素，将于第一灰阶影像111找到的G个强变异性的像素与于第二灰阶影像121找到的一一对应的G个像素计算得G个视差，并将G个视差求和再得到平均值进行判断，若G个视差和的平均值小于零，则将第一影像11与第二影像12的顺序对换。具体实施时，目标物Q、第一取像单元O1及第二取像单元104形成的对极面QO1O2于第一影像11与第二影像12上相交形成第二对极线132；第二区块142的中心点在第二对极线132上，以中心点延展形成第二区块142，例如以第三像素1122延展形成的第二区块142为7pixel*7pixel。具体来说，第一影像11及第二影像12中包含多个物体，依据各个物体形成的对极线找寻第一影像与第二影像上对应的强变异性的像素，依据每组对应的强变异性像素得到各自的视差，将所有视差求和归一化得到结果值，如果第一影像11的顺序于第二影像12的顺序之前且结果值小于零，将第一影像11与第二影像12的顺序对换，投影单元102先投影第二影像12再投影第一影像11；如果第一影像11的顺序于第二影像12的顺序之前且结果值大于零，处理单元101维持第一影像11与第二影像12的顺序，投影单元102先投影第一影像11再投影第二影像12；如果第一影像11的顺序于第二影像12的顺序之后且结果值小于零，处理单元101维持第一影像11与第二影像12的顺序，投影单元102先投影第一影像11再投影第二影像12；如果第一影像11的顺序于第二影像12的顺序之后且结果值大于零，处理单元101将第一影像11与第二影像12的顺序对换，投影单元102先投影第二影像12再投影第一影像11。
参照图5所示，图5为本发明一实施例的判别连续影像顺序的方法的流程图。本发明还提出了一种判别连续影像顺序的方法104，用于判别连续影像顺序的系统100。一并参照图1～图4所示，首先，执行步骤S10，将第一影像11转换为第一灰阶影像111及将第二影像12转换为第二灰阶影像121；接着，执行步骤S12，于第一灰阶影像111找到方差值不小于设定值103的第一像素1121；接着，执行步骤S14，以第一像素1121为中心点延展第一区块141得到第一值1111，其中第一像素1121位于第一对极线131及第一区块141位于第一灰阶影像111的第一位置A1；接着，执行步骤S16，于第二灰阶影像121使该第一区块141沿着第一对极线131得到第二位置A2，使位于第一位置A1的第一方块141与位于第二位置A2的第一方块141的差异值最小；接着，执行步骤S18，于第二灰阶影像121的第一区块141得到第一对极线131上的第二像素1221，使第一像素1121具有的第一灰阶值与该第二像素1221具有的第二灰阶值的差的平方为最小；接着，执行步骤S20，当第一影像11的顺序于第二影像12的顺序之前且第一视差D1小于零时，将第一影像11与第二影像12的顺序对换；其中，第一视差D1为第一像素1121于第一对极线131具有的第一坐标X1与第二像素1221于第一对极线131具有的第二坐标X2的差值。如此，能够不需使用者介入而自动判别第一影像11与第二影像12的顺序，实现藉由立体视觉对应演算法来确定第一影像11与第二影像12的顺序，使得实时运算效率高。
更好地，于第一灰阶影像111找到方差值不小于设定值103的第三像素1122；以第三像素1122为中心点延展第二区块142得到第三值1112，其中第三像素1122位于第二对极线132及第二区块142位于第一灰阶影像111的第三位置A3；于第二灰阶影像121使第二区块142沿着第二对极线132得到第四位置A4，使位于第三位置A3的第二方块142与位于第四位置A4的第二方块142的差异值最小，差异值的计算方式为位于第三位置A3的第二方块142与位于第四位置A4的第二方块142的每个对应像素的灰阶值相减的平方和；于第二灰阶影像121的第一二区块142得到第二对极线132上的第四像素1222，使第三像素1122具有的第三灰阶值与该第四像素1222具有的第四灰阶值的差的平方为最小；当第一影像11的顺序于第二影像12的顺序之前且第一视差D1与第二视差D2的和小于零时，将第一影像11与第二影像12的顺序对换，投影单元102先投影第二影像12再投影第一影像11；其中第二对极线132与同一水平线平行O1O2，第二视差D2为第三像素1122于第二对极线132具有的第三坐标X3与第四像素1222于第二对极线132具有的第四坐标X4的差值。
更好地，藉由第一取像单元O1撷取第一影像11；藉由第二取像单元O2撷取第二影像12，其中第一取像单元01与第二取像单元O2位于同一水平线上O1O2。
更好地，差异值为位于第一位置A1的第一区块141与位于第二位置A2的第一区块141的每个对应像素的灰阶值相减的平方和。
更好地，于第一灰阶影像111得到方差值最大为设定值103。
更好地，当第一影像11的顺序于第二影像12的顺序之前且第一视差D1大于零时，维持第一影像11与第二影像12的顺序，先投影第一影像11再投影第二影像12；当第一影像11的顺序于第二影像12的顺序之后且第一视差D1小于零时，维持第一影像11与第二影像12的顺序，先投影第一影像11再投影第二影像12；当第一影像11的顺序于第二影像12的顺序之后且第一视差D1大于零时，将第一影像11与第二影像12的顺序对换，先投影第二影像12再投影第一影像11。
更好地，第一影像11为左眼影像且第二影像12为右眼影像，当第一影像11的顺序于第二影像12的顺序之前且第一视差D1小于零时，则将左眼影像与右眼影像的顺序对换；当第一影像11的顺序于第二影像12的顺序之前且第一视差D1大于零时，则维持左眼影像与右眼影像的顺序；当第一影像111的顺序于第二影像2的顺序之后且第一视差D1小于零时，则维持左眼影像与右眼影像的顺序；当第一影像11的顺序于第二影像12的顺序之后且第一视差D1大于零时，则将左眼影像与右眼影像的顺序对换。
参照图6所示，图6为本发明另一实施例的判别连续影像顺序的方法的流程图。本发明还提出了一种判别连续影像顺序的方法105，用于判别连续影像顺序的系统100。一并参照图1～图4所示，首先，执行步骤S30，将转换为第一灰阶影像111及将转换为第二灰阶影像121；接着，执行步骤S32，于第一灰阶影像111找到方差值不小于设定值103的第一像素1121；接着，执行步骤S34，以第一像素1121为中心点延展第一区块141得到第一值1111，其中第一像素1121位于第一对极线131及第一区块141位于第一灰阶影像111的第一位置A1；接着，执行步骤S36，于第二灰阶影像121使该第一区块141沿着第一对极线131得到第二位置A2，使位于第一位置A1的第一方块141与位于第二位置A2的第二方块141的差异值最小；接着，执行步骤S38，于第二灰阶影像121的第一区块141得到第一对极线131上的第二像素1221，使第一像素1121具有的第一灰阶值与该第二像素1221具有的第二灰阶值的差的平方为最小；接着，执行步骤S40，当的顺序于的顺序之前且第一视差D1小于零时，将与的顺序对换；其中，第一视差D1为第一像素1121于第一对极线131具有的第一坐标X1与第二像素1221于第一对极线131具有的第二坐标X2的差值，如此，能够不需使用者介入而自动判别左眼影像与右眼影像的顺序，实现藉由立体视觉对应演算法来确定左眼影像与右眼影像的顺序，使得实时运算效率高。
综上所述，本发明提供的一种判别连续影像顺序的系统及判别连续影像顺序的方法，判别连续影像顺序的系统包括处理单元、投影单元、第一取像单元及第二取像单元，第一取像单元撷取第一影像，第二取像单元撷取第二影像，第二取像单元与第一取像单元位于同一水平线，处理单元用于处理第一影像及第二影像，投影单元用于投射第一影像及第二影像，投影单元与处理单元通讯连接，处理单元将第一影像转换为第一灰阶影像及将第二影像转换为第二灰阶影像，处理单元于第一灰阶影像找到方差值不小于设定值的第一像素，处理单元以第一像素为中心点延展第一区块得到第一值，其中第一像素位于第一对极线及第一区块位于第一灰阶影像的第一位置；处理单元于第二灰阶影像使第一区块沿着第一对极线得到第二位置，使位于第一位置的第一方块与位于第二位置的第一方块的差异值最小；处理单元于第二灰阶影像的第一区块得到第一对极线上的第二像素，使第一像素具有的第一灰阶值与第二像素具有的第二灰阶值的差的平方为最小；当第一影像的顺序于第二影像的顺序之前且第一视差小于零时，处理单元将第一影像与第二影像的顺序对换，其中第一视差为第一像素于第一对极线具有的第一坐标与第二像素于第一对极线具有的第二坐标的差值，如此，能够不需使用者介入而自动判别第一影像与第二影像的顺序，实现藉由立体视觉对应演算法来确定第一影像与第二影像的顺序，使得实时运算效率高。
虽然结合附图对本发明进行了说明，但是附图中公开的实施方式旨在对本发明优选实施方式进行示例性说明，而不能理解为对本发明的一种限制。为了清楚描述所需的部件，示意性附图中的比例并不表示实际部件的比例关系。
本发明已由上述相关实施例加以描述，然而上述实施例仅为实施本发明的范例。必需指出的是，已揭露的实施例并未限制本发明的范围。相反地，在不脱离本发明的精神和范围内所作的更动与润饰，均属本发明的专利保护范围。
Claims (10)
1.一种判别连续影像顺序的方法，其特征在于，该方法包括：
将第一影像转换为第一灰阶影像及将第二影像转换为第二灰阶影像；
于该第一灰阶影像找到方差值不小于设定值的第一像素；
以该第一像素为中心点延展得到第一区块，其中该第一像素位于第一对极线及该第一区块位于该第一灰阶影像的第一位置；
于该第二灰阶影像使该第一区块沿着该第一对极线得到第二位置，使位于该第一位置的该第一区块与位于该第二位置的该第一区块的差异值最小；
于该第二灰阶影像的该第一区块得到该第一对极线上的第二像素，使该第一像素具有的第一灰阶值与该第二像素具有的第二灰阶值的差的平方为最小；以及
当该第一影像的顺序于该第二影像的顺序之前且第一视差小于零时，将该第一影像与该第二影像的顺序对换，其中该第一视差为该第一像素于该第一对极线具有的第一坐标与该第二像素于该第一对极线具有的第二坐标的差值。
2.如权利要求1所述的判别连续影像顺序的方法，其特征在于，该方法还包括：
于该第一灰阶影像找到方差值不小于该设定值的第三像素；
以该第三像素为中心点延展第二区块得到第三值，其中该第三像素位于第二对极线及该第二区块位于该第一灰阶影像的第三位置；
于该第二灰阶影像使该第二区块沿着该第二对极线得到第四位置，使位于该第三位置的该第二区块与位于该第四位置的该第二区块的差异值最小；
于该第二灰阶影像的该第二区块得到该第二对极线上的第四像素，使该第三像素具有的第三灰阶值与该第四像素具有的第四灰阶值的差的平方为最小；以及
当该第一影像的顺序于该第二影像的顺序之前且该第一视差与第二视差的和小于零时，将该第一影像与该第二影像的顺序对换，其中该第二对极线与该第一对极线平行，该第二视差为该第三像素于该第二对极线具有的第三坐标与该第四像素于该第二对极线具有的第四坐标的差值。
3.如权利要求1所述的判别连续影像顺序的方法，其特征在于，该方法还包括：
藉由第一取像单元撷取该第一影像；
藉由第二取像单元撷取该第二影像，其中该第一取像单元与该第二取像单元位于同一水平线上，该同一水平线与该第一对极线平行。
4.如权利要求1所述的判别连续影像顺序的方法，其特征在于，该差异值为位于该第一位置的该第一区块与位于该第二位置的该第一区块的每个对应像素的灰阶值相减的平方和。
5.如权利要求1所述的判别连续影像顺序的方法，其特征在于，于该第一灰阶影像得到方差值最大为该设定值。
6.如权利要求1所述的判别连续影像顺序的方法，其特征在于，该方法还包括：
当该第一影像的顺序于该第二影像的顺序之前且该第一视差大于零时，维持该第一影像与该第二影像的顺序；
当该第一影像的顺序于该第二影像的顺序之后且该第一视差小于零时，则维持该第一影像与该第二影像的顺序；以及
当该第一影像的顺序于该第二影像的顺序之后且该第一视差大于零时，则将该第一影像与该第二影像的顺序对换。
7.如权利要求1所述的判别连续影像顺序的方法，其特征在于，该方法还包括：
该第一影像为左眼影像且该第二影像为右眼影像；
当该第一影像的顺序于该第二影像的顺序之前且该第一视差小于零时，则将该左眼影像与该右眼影像的顺序对换；
当该第一影像的顺序于该第二影像的顺序之前且该第一视差大于零时，则维持该左眼影像与该右眼影像的顺序；
当该第一影像的顺序于该第二影像的顺序之后且该第一视差小于零时，则维持该左眼影像与该右眼影像的顺序；以及
当该第一影像的顺序于该第二影像的顺序之后且该第一视差大于零时，则将该左眼影像与该右眼影像的顺序对换。
8.一种判别连续影像顺序的系统，其特征在于，该判别连续影像顺序的系统包括：
第一取像单元，撷取第一影像；
第二取像单元，撷取第二影像，该第二取像单元与该第一取像单元位于同一水平线上；
处理单元，用于处理该第一影像及该第二影像；以及
投影单元，与该处理单元通讯连接，该投影单元投射该第一影像及该第二影像；
其中，该处理单元将该第一影像转换为第一灰阶影像及将该第二影像转换为第二灰阶影像；该处理单元于该第一灰阶影像找到方差值不小于设定值的第一像素；该处理单元以该第一像素为中心点延展第一区块得到第一值，其中该第一像素位于第一对极线及该第一区块位于该第一灰阶影像的第一位置；该处理单元于该第二灰阶影像使该第一区块沿着该第一对极线得到第二位置，使位于该第一位置的该第一区块与位于该第二位置的该第一区块的差异值最小；该处理单元于该第二灰阶影像的该第一区块得到该第一对极线上的第二像素，使该第一像素具有的第一灰阶值与该第二像素具有的第二灰阶值的差的平方为最小；当该第一影像的顺序于该第二影像的顺序之前且第一视差小于零时，该处理单元将该第一影像与该第二影像的顺序对换，其中该第一视差为该第一像素于该第一对极线具有的第一坐标与该第二像素于该第一对极线具有的第二坐标的差值。
9.如权利要求8所述的判别连续影像顺序的系统，其特征在于，该处理单元于该第一灰阶影像找到方差值不小于该设定值的第三像素；该处理单元以该第三像素为中心点延展第二区块得到第三值，其中该第三像素位于第二对极线及该第二区块位于该第一灰阶影像的第三位置；该处理单元于该第二灰阶影像使该第二区块沿着该第二对极线得到第四位置，使位于该第三位置的该第二区块与位于该第四位置的该第二区块的差异值最小；该处理单元于该第二灰阶影像的该第二区块得到该第二对极线上的第四像素，使该第三像素具有的第三灰阶值与该第四像素具有的第四灰阶值的差的平方为最小；当该第一影像的顺序于该第二影像的顺序之前且该第一视差与第二视差的和小于零时，该处理单元将该第一影像与该第二影像的顺序对换，其中该第二对极线与该第一对极线平行，该第二视差为该第三像素于该第二对极线具有的第三坐标与该第四像素于该第二对极线具有的第四坐标的差值。
10.如权利要求8所述的判别连续影像顺序的系统，其特征在于，当该第一影像的顺序于该第二影像的顺序之前且该第一视差大于零时，该处理单元维持该第一影像与该第二影像的顺序，该投影单元先投影该第一影像再投影该第二影像；
当该第一影像的顺序于该第二影像的顺序之后且该第一视差小于零时，该处理单元维持该第一影像与该第二影像的的顺序，该投影单元先投影该第一影像再投影该第二影像；以及
当该第一影像的顺序于该第二影像的顺序之后且该第一视差大于零时，该处理单元将该第一影像与该第二影像的顺序对换，该投影单元先投影该第二影像再投影该第一影像。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011118198.5A CN114390271B (zh) | 2020-10-19 | 2020-10-19 | 判别连续影像顺序的系统及其方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011118198.5A CN114390271B (zh) | 2020-10-19 | 2020-10-19 | 判别连续影像顺序的系统及其方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN114390271A CN114390271A (zh) | 2022-04-22 |
| CN114390271B true CN114390271B (zh) | 2023-08-18 |
Family
ID=81193027
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011118198.5A Active CN114390271B (zh) | 2020-10-19 | 2020-10-19 | 判别连续影像顺序的系统及其方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114390271B (zh) |
Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5768404A (en) * | 1994-04-13 | 1998-06-16 | Matsushita Electric Industrial Co., Ltd. | Motion and disparity estimation method, image synthesis method, and apparatus for implementing same methods |
| TW200828980A (en) * | 2006-12-29 | 2008-07-01 | Quanta Comp Inc | Method for displaying stereoscopic image |
| WO2009148038A1 (ja) * | 2008-06-06 | 2009-12-10 | ソニー株式会社 | 立体視画像生成装置、立体視画像生成方法およびプログラム |
| TW201108714A (en) * | 2009-06-29 | 2011-03-01 | Sony Corp | Three-dimensional image data transmission device, three-dimensional image data transmission method, three-dimensional image data reception device, and three-dimensional image data reception method |
| JP2011172134A (ja) * | 2010-02-22 | 2011-09-01 | Victor Co Of Japan Ltd | 映像生成装置および映像生成方法 |
| CN102685522A (zh) * | 2011-03-15 | 2012-09-19 | 乐金显示有限公司 | 多视图立体图像显示装置及其驱动方法 |
| CN102892011A (zh) * | 2011-07-22 | 2013-01-23 | 友达光电股份有限公司 | 立体影像的显示方法 |
| WO2013035457A1 (ja) * | 2011-09-07 | 2013-03-14 | シャープ株式会社 | 立体画像処理装置、立体画像処理方法、及びプログラム |
| JP2013207491A (ja) * | 2012-03-28 | 2013-10-07 | Casio Comput Co Ltd | 表示装置、同期方法及びプログラム |
| WO2014026415A1 (zh) * | 2012-08-17 | 2014-02-20 | 深圳市华星光电技术有限公司 | 一种用于降低快门式3d液晶显示串扰的方法、装置以及液晶显示器 |
| CN105376543A (zh) * | 2014-08-06 | 2016-03-02 | Tcl集团股份有限公司 | 一种3d图像的视差图获取方法及系统 |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5327524B2 (ja) * | 2009-02-27 | 2013-10-30 | ソニー株式会社 | 画像処理装置、画像処理方法、およびプログラム |
| KR20120051308A (ko) * | 2010-11-12 | 2012-05-22 | 삼성전자주식회사 | 3ｄ 입체감을 개선하고 시청 피로를 저감하는 방법 및 장치 |
| JP6912313B2 (ja) * | 2017-07-31 | 2021-08-04 | パナソニックｉ−ＰＲＯセンシングソリューションズ株式会社 | 画像処理装置、カメラ装置及び画像処理方法 |
-
2020
- 2020-10-19 CN CN202011118198.5A patent/CN114390271B/zh active Active
Patent Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5768404A (en) * | 1994-04-13 | 1998-06-16 | Matsushita Electric Industrial Co., Ltd. | Motion and disparity estimation method, image synthesis method, and apparatus for implementing same methods |
| TW200828980A (en) * | 2006-12-29 | 2008-07-01 | Quanta Comp Inc | Method for displaying stereoscopic image |
| WO2009148038A1 (ja) * | 2008-06-06 | 2009-12-10 | ソニー株式会社 | 立体視画像生成装置、立体視画像生成方法およびプログラム |
| TW201108714A (en) * | 2009-06-29 | 2011-03-01 | Sony Corp | Three-dimensional image data transmission device, three-dimensional image data transmission method, three-dimensional image data reception device, and three-dimensional image data reception method |
| JP2011172134A (ja) * | 2010-02-22 | 2011-09-01 | Victor Co Of Japan Ltd | 映像生成装置および映像生成方法 |
| CN102685522A (zh) * | 2011-03-15 | 2012-09-19 | 乐金显示有限公司 | 多视图立体图像显示装置及其驱动方法 |
| CN102892011A (zh) * | 2011-07-22 | 2013-01-23 | 友达光电股份有限公司 | 立体影像的显示方法 |
| WO2013035457A1 (ja) * | 2011-09-07 | 2013-03-14 | シャープ株式会社 | 立体画像処理装置、立体画像処理方法、及びプログラム |
| JP2013207491A (ja) * | 2012-03-28 | 2013-10-07 | Casio Comput Co Ltd | 表示装置、同期方法及びプログラム |
| WO2014026415A1 (zh) * | 2012-08-17 | 2014-02-20 | 深圳市华星光电技术有限公司 | 一种用于降低快门式3d液晶显示串扰的方法、装置以及液晶显示器 |
| CN105376543A (zh) * | 2014-08-06 | 2016-03-02 | Tcl集团股份有限公司 | 一种3d图像的视差图获取方法及系统 |
Non-Patent Citations (1)
| Title |
|---|
| 立体对图像的视差与景深关系;刘星;梁发云;何磊;杨金远;;南昌大学学报(工科版)(第02期);全文 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN114390271A (zh) | 2022-04-22 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8116557B2 (en) | 3D image processing apparatus and method | |
| US7944444B2 (en) | 3D image processing apparatus and method | |
| KR100776649B1 (ko) | 깊이 정보 기반 스테레오/다시점 영상 정합 장치 및 방법 | |
| US8890934B2 (en) | Stereoscopic image aligning apparatus, stereoscopic image aligning method, and program of the same | |
| JP6027034B2 (ja) | 立体映像エラー改善方法及び装置 | |
| CN101933335B (zh) | 将二维图像数据转换为立体图像数据的方法和系统 | |
| JP5954668B2 (ja) | 画像処理装置、撮像装置および画像処理方法 | |
| US8659644B2 (en) | Stereo video capture system and method | |
| EP2618584A1 (en) | Stereoscopic video creation device and stereoscopic video creation method | |
| US9154762B2 (en) | Stereoscopic image system utilizing pixel shifting and interpolation | |
| KR20140108078A (ko) | 논-스테레오스코픽 카메라를 이용하여 스테레오스코픽 이미지를 생성하는 방법과 기기 및 장치 | |
| JP2000261828A (ja) | 立体映像生成方法 | |
| TWI531212B (zh) | 呈現立體影像之系統及方法 | |
| WO2022142139A1 (zh) | 投影面选取和投影图像校正方法、装置、投影仪及介质 | |
| TWI553591B (zh) | 深度影像處理方法及深度影像處理系統 | |
| Kim et al. | Depth adjustment for stereoscopic image using visual fatigue prediction and depth-based view synthesis | |
| TWI491244B (zh) | 調整物件三維深度的方法與裝置、以及偵測物件三維深度的方法與裝置 | |
| CN114390271B (zh) | 判别连续影像顺序的系统及其方法 | |
| EP3396949A1 (en) | Apparatus and method for processing a depth map | |
| CN102307307A (zh) | 产生立体影片深度图的方法 | |
| JP2014072809A (ja) | 画像生成装置、画像生成方法、画像生成装置用プログラム | |
| JPH08201941A (ja) | ３次元画像形成方法 | |
| CN102547343B (zh) | 立体图像处理方法、立体图像处理装置和显示装置 | |
| KR20110025083A (ko) | 입체 영상 시스템에서 입체 영상 디스플레이 장치 및 방법 | |
| JP5871113B2 (ja) | 立体画像生成装置、立体画像生成方法及び立体画像生成プログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |