CN1318815A - 物体领域信息产生方法和装置及近似多边形产生方法和装置 - Google Patents
物体领域信息产生方法和装置及近似多边形产生方法和装置 Download PDFInfo
- Publication number
- CN1318815A CN1318815A CN01119293A CN01119293A CN1318815A CN 1318815 A CN1318815 A CN 1318815A CN 01119293 A CN01119293 A CN 01119293A CN 01119293 A CN01119293 A CN 01119293A CN 1318815 A CN1318815 A CN 1318815A
- Authority
- CN
- China
- Prior art keywords
- frame
- approximate
- summits
- summit
- field
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 102
- 238000012545 processing Methods 0.000 claims abstract description 58
- 230000014509 gene expression Effects 0.000 claims description 40
- 230000005484 gravity Effects 0.000 claims description 25
- 230000008569 process Effects 0.000 claims description 21
- 230000033228 biological regulation Effects 0.000 claims description 6
- 230000010365 information processing Effects 0.000 claims description 4
- 230000006870 function Effects 0.000 description 73
- 230000015572 biosynthetic process Effects 0.000 description 10
- 238000003860 storage Methods 0.000 description 7
- 238000006243 chemical reaction Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 230000008859 change Effects 0.000 description 4
- 238000013500 data storage Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 238000010009 beating Methods 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000003292 diminished effect Effects 0.000 description 2
- 230000008030 elimination Effects 0.000 description 2
- 238000003379 elimination reaction Methods 0.000 description 2
- 230000005055 memory storage Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 241001465754 Metazoa Species 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000001143 conditioned effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T9/00—Image coding
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30241—Trajectory
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Analysis (AREA)
- Image Generation (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明提供一种能够高精度快速地多边形近似影像中所期望的物体领域、并能够以少的数据量来记述影像中的所期望物体领域的物体领域信息产生装置。本发明还提供一种经过连接影像中任意物体的领域的多个帧来产生所述信息的领域信息用物体领域信息记述方法,由多边形产生部101产生表示影像中成为对象的物体领域的近似多边形,由顶点对应产生部102特定该近似多边形的顶点的邻接帧中的顶点对应,由函数近似处理部103通过规定的函数来近似沿帧的行进排列该近似多边形的顶点位置数据时的顶点轨迹,使用该函数的参数作为关于该物体领域的信息。
Description
本发明涉及产生表示影像和图像中的物体的领域的信息的物体领域信息产生方法和物体领域信息产生装置,以及产生近似影像或图像的1个帧中的任意物体的领域的近似多边形的近似多边形产生方法和近似多边形产生装置。
近年来,由于影像图像处理技术的快速发展,一般将影像和图像处理为数字数据。确立了将该数字化的数据量与效率地压缩为大的影像和图像的技术。另外,伴随着互联网和卫星广播和CATV等网络技术的发展,与大量的影像需求相对照取得的利用影像和图像数据库和影像联机实时进入实用阶段,另外,来自远方的自动监视系统也变得主要了。如此利用影像和图像时,要求通过画面内的内容来将影像和图像分类,并抽出影像和图像中的物体后进行处理或检索。
为了响应该要求,判别影像和图像内描述的内容用的技术的研究盛行起来。然而,因为在影像和图像中存在同时多个物体和背景,所以为了判别物体,作为前提条件就有必要将背景与物体区分开。此时,虽然有必要以其形状来表示物体的领域信息,但它却不能正确表现物体的位置、大小、形状信息。作为此目的的方法有例如作为提高物体存在的部分的亮度、降低没有存在部分的亮度的图像表示的α变换和由长方形近似的跳动盒等方案。但是,α变换具有数据量大,物体的位置和大小的检测的计算量大的缺点,另外,在跳动盒中不可能表现物体的形状。
作为解决这些缺点的方法是以多边形来近似物体的方法。因为仅记述了多边形各顶点的坐标,所以与α变换相比,数据量特别少。另外,因为具有能够忠实地表现物体的位置、大小、形状的特征,所以是最适于物体领域信息的表现的方法。
但是,作为已有的多边形近似物体的方法,主要使用求出物体的惯性主轴并将惯性主轴与物体轮廓的交点作为顶点后、向顶点追加离连接各顶点间的直线的距离最远的物体轮廓上的顶点、得到必要的顶点数的多边形的方法。在该方法中,在追加一个顶点时,需要探索物体轮廓上的点,因而多边形近似的计算量大。另外,因为顶点一定存在于物体轮廓上,所以在物体的凸出部分中,顶点间的连线进入物体的内部。反过来,在物体的凹入部分中,顶点间的连线在物体的外部之外,多边形与物体的误差大。
另外,即使在影像中的物体的表现,由于与图像相同的理由,与α变换和跳动盒(バウンディングボツクス)相比,多边形近似在数据量和物体的位置、大小、形状的表面方面具有优点。但是,以多边形近似来表现物体的时间变化的情况下,虽然记述了多边形近似的各顶点的移动,但为了逐一记录各帧的顶点的位置,数据量变多,因而不适合。
因为考虑了上述事情,所以本发明的目的是提供一种能够快速高精度地产生表现影像中所期望的物体的领域的近似多边形的顶点的轨迹的物体领域信息产生方法和物体领域信息产生装置。
本发明的另一个目的是提供一种能够以少的数据量来记述影像中所期望物体的领域且容易进行其操作和其数据处理的物体领域信息产生方法和物体领域产生装置。
本发明的再一个目的是提供一种能够高精度快速地产生近似影像或图像的1个帧中的任意物体的领域的近似多边形的近似多边形产生方法和近似多边形产生装置。
本发明第1方面的经过连续的涉及影像数据中的任意物体的领域的信息的多个帧产生记述的物体领域信息的物体领域信息产生方法,其特征在于:在各个所述的多个帧中,使用近似多边形来近似所述影像数据中的所述物体的领域,在各个所述帧的相邻帧之间,对于近似前面的帧中的所述物体的领域的近似多边形的多个顶点中的每一个,近似下一帧中的所述物体的领域的近似多边形的多个顶点中,通过对应于重合两近似多边形的重心时的顶点间距离最小,求出多个顶点中沿帧的行进排列多个顶点中的顶点位置数据时的轨迹,基于求出的所述多个顶点的轨迹,产生所述物体领域信息。
本发明第2方面的经过连续的涉及影像数据中的任意物体的领域的信息的多个帧后产生记述的物体领域信息的物体领域信息产生方法,其特征在于:在各个所述的多个帧中,使用近似多边形来近似所述影像数据中的所述物体的领域,在各个所述帧的相邻帧之间,对于近似前面的帧中的所述物体的领域的近似多边形的多个顶点中的每一个,近似下一帧中的所述物体的领域的近似多边形的多个顶点中,通过对应于由至已求出的前面帧中的该顶点的轨迹推定的位置中最近的位置,求出多个顶点中沿帧的行进排列多个顶点中的顶点位置数据时的轨迹,基于求出的所述多个顶点的轨迹,产生所述物体领域信息。
本发明第3方面的经过连续的涉及影像数据中的任意物体的领域的信息的多个帧后产生记述的物体领域信息的物体领域信息产生方法,其特征在于:在各个所述的多个帧中,使用近似多边形来近似所述影像数据中的所述物体的领域,在各个所述帧的相邻帧之间,对于近似前面的帧中的所述物体的领域的近似多边形的多个顶点中的每一个,近似下一帧中的所述物体的领域的近似多边形的多个顶点中,通过对应于具有与前面帧中的该顶点具有的特征量最接近的特征量,求出多个顶点中沿帧的行进排列多个顶点中的顶点位置数据时的轨迹,基于求出的所述多个顶点的轨迹,产生所述物体领域信息。
最好是,在上述对应中,只要使顶点1对1的对应就行。
最好是,在上述对应中,只要使顶点对应不替换顶点的顺序的进行对应就行。
本发明第4方面的经过连续的涉及影像数据中的任意物体的领域的信息的多个帧后产生记述的物体领域信息的物体领域信息产生方法,其特征在于:基于表示近似经过已产生的刚好在前面的帧之前的帧的所述物体的领域的近似多边形的多个顶点的位置数据的轨迹的信息,推定近似该帧中的所述物体的领域的近似多边形的多个顶点的位置数据,通过修正这些推定的多个顶点位置数据以与该帧中的上述物体的领域相适合,进行产生表示近似从前面帧起至该帧止的所述物体的领域的近似多边形的多个顶点的位置数据的轨迹的信息的处理,基于通过经过所述多个帧重复所述处理求出的所述多个顶点的轨迹,产生所述物体领域信息。
最好是,为了推定产生的帧的近似多边形的顶点位置数据,函数近似已产生的多个帧中的近似多边形的顶点位置数据的轨迹,只要推定产生的帧的近似多边形的顶点位置数据就行。
最好是,为了在推定上述近似多边形的顶点位置数据,只要利用已产生的最近的帧的近似多边形的顶点位置数据就行。
最好是,为了在推定上述近似多边形的顶点位置数据中,最好从经过已产生的多个帧的近似多边形的重心来推定该帧的重心位置,只要利用移动至推定的已产生的最近帧的近似多边形的重心位置时的近似多边形的顶点位置数据就行。
本发明第8方面的产生近似影像或图像的1个帧中的任意物体领域的近似多边形的近似多边形产生方法,其特征在于:取出影像或图像的1个帧中的所述物体的领域轮廓,基于该取出的轮廓,产生表示该物体领域的初期的多边形,基于此时的多边形的各顶点的特征量来选择应去除的顶点,去除选择的顶点,并且移动与去除的顶点邻接的顶点,进行更新所述多边形的各顶点的特征量的处理,通过在满足规定的终止条件后重复进行所述处理,产生近似该帧中的所述物体领域的近似多边形。
最好是,上述特征量是使用在该顶点和与其邻接的2个顶点形成的三角形面积。
最好是,上述特征量是使用在该顶点和与其邻接的2个顶点形成的角度,
最好是,上述终止条件是使用比指定的多边形的顶点数的值低的值。
最好是,上述终止条件是使用比多边形和物体的近似误差的值高的值。
通过本发明,例如,如下所述,能够将影像中的物体表示为多边形的顶点的轨迹。
例如,首先,检测各帧中存在物体的领域,从领域的轮廓产生初期多边形。通过消除多边形各顶点的特征量来试着消除影响小的顶点。此时,通过移动邻接顶点,由于顶点的消除来缩小误差的扩大。通过在满足终止条件时重复上述动作,形成表示物体领域信息的多边形。
因为只是在计算量最大的是寻找物体轮廓上的点来形成初期多边形的时候,所以该算法操作得比已有的算法快速,另外其优点在于,因为一边移动变化顶点一边产生多边形,所以近似误差少。
在各帧中产生领域信息,并通过对应于邻接帧间的顶点将物体的时间变化记述为顶点的轨迹。此时,例如,对应于时应的顶点间的距离为最小。此后,函数近似各顶点的轨迹来消除数据量。
另外,在输入各帧的物体处产生顶点轨迹时,由已形成的帧的物体领域信息来推定产生的帧的物体领域,通过与物体比较来改变推定的物体领域信息来产生顶点的轨迹。
据此,本发明能够高精度地快速多边形近似影像中所期望的物体的领域的大小、形状、移动、变形。另外,能够用少的数据量来记述影像中所期望的物体的领域,并且容易进行其形成和其数据的处理,因此,在影像数据库和监视系统中能够被有效地利用于物体的确认、分类、检索等。
另外,本发明能够在通过各帧的顶点数可能变得不同和物体的变形、移动等而帧之间的顶点对应可能多的情况下进行适当的函数近似。
并且,与装置相关的本发明也可以作为与方法相关的发明成立,并且与方法相关的本发明也可以作为与装置相关的本发明成立。
另外,与装置或方法相关的本发明也可作为在计算机中记录实行相当于本发明的顺序用(或是作为计算机中相当于本发明的装置的机能用、或是计算机中实现相当于本发明的机能用)程序的计算机能够读取的记录媒体而成立。
本发明能够高精度地快速地多边形近似影像中所期望的物体的领域。
另外,本发明能够用少的数据量来记述影像中所期望的物体的领域,并且容易地进行其形成和其数据的处理。
图1是表示关于本发明的实施例1的物体领域信息产生装置的构成实例的图;
图2是表示同一实施例中的处理顺序的一个实例的图;
图3是表示多边形产生处理的顺序的一个实例的流程图;
图4是用于说明多边形产生处理的图;
图5是用于说明近似多边形产生处理中的顶点去除和相邻顶点的移动处理的图;
图6是表示顶点对应处理的顺序的一个实例的流程图;
图7是用于说明顶点对应处理的图;
图8是用于说明函数近似处理的图;
图9是表示物体领域信息的数据结构的一个实例的图;
图10是表示物体领域信息中近似多边形数据的数据结构的一个实例的图;
图11是表示近似多边形数据中的顶点轨迹数据的数据结构的一个实例的图;
图12是表示本发明的实施例2的处理顺序的一个实例的流程图;
图13是用于说明本发明的实施例2的处理的图。
下面,参照附图来说明发明的实施例。
实施例1
图1是表示关于本发明的实施例1的物体领域信息产生装置的构成实例的图。在图1中,该物体领域信息产生装置包括影像数据存储部100、多边形产生部101、顶点对应形成部102、函数近似处理部103和物体领域信息存储部104。
影像数据存储部100因为存储影像数据,所以由例如硬盘和光盘、半导体存储器等构成。
多边形产生部101根据存在应由影像(或图像)数据中抽出的物体的各帧来产生表示该物体的领域的多边形。并且,物体是例如影像中的特定的人和动物、其它自然物、或车、建筑物等制造物、构造物等(或其一部分、例如人的头部、车的发动机罩、建筑物的大门等)的图像。下面,将表示物体的领域的多边形称为近似多边形。近似多边形用该多边形的各顶点的坐标(X-Y坐标组)来表示。
并且,对于同一物体有经过与该物体相关的全帧使用同一顶点数的多边形的方法和每个帧中的多边形的顶点数变得不同的方法。
顶点对应形成部102经过各物体的多个帧产生的近似多边形的各顶点,根据相邻帧连锁地进行产生的多边形的各顶点的对应,产生经过对于各物体的多个帧的近似多边形的顶点的轨迹,另外,在由影像数据中应抽出的各物体中,经过由出现该物体的帧消除的帧来进行该顶点对应处理。
例如,对应于邻接近似某一帧中的物体的领域的近似多边形的顶点的帧的对应的近似多边形的顶点来求出顶点轨迹时,通过与(例如比较多边形的重心时的)该帧中的顶点邻接的帧的对应顶点的距离变得最小来决定。
另外,例如,从已对应的顶点的轨迹来推定邻接帧的顶点的位置,通过与该顶点邻接的帧的顶点间距离变得最小来决定。
另外,例如计算多边形顶点中的特征量,通过邻接帧的对应顶点中的特征量变得最接近来决定。
函数近似处理部103在各物体中根据近似多边形的各顶点的轨迹(从出现帧至消失帧的多个帧的各对应顶点的坐标系列)来进行函数近似。例如,1个物体的近似多边形的各顶点在X坐标、Y坐标中表现为帧号码f和时间标志t的函数。作为函数近似方法是直线近似、仿样(spline)曲线等。函数近似的结果,例如由所似函数的多项式系数等的参数值表示。因此,通过函数近似经过多个帧的顶点的轨迹,能够消除应记录的数据量。
物体领域信息存储部104按照规定的格式存储包含由函数近似处理部103产生的函数近似表现的各物体的近似多边形的各顶点的各坐标的顺序轨迹的数据(例如,近似函数的多项式系数等参数值)的物体领域信息。物体领域信息存储部104与影像数据存储部100一样,由例如硬盘和光盘、半导体存储器等构成。
由各物体产生的物体领域信息能够有效用于例如在进行影像数据库和监视系统等的物体的确认和分类等时候。
并且,影像数据存储部100、物体领域信息存储部104可由不同的存储装置构成,也可由同一存储装置构成。
图2是表示通过本实施例的物体领域信息产生装置的处理顺序的一个实例的流程图。
并且,作为处理顺序的变形,
(1)取出一个帧,根据该帧,进行步骤S11-S13的连续处理(多边形产生处理、顶点对应处理、函数近似处理),读入下一帧,如上述,顺序进行每1帧的方法。和
(2)从最初根据多个帧来进行步骤11的多边形产生处理开始,接着进行步骤S12的顶点对应处理,接着进行步骤13的函数近似处理,如上述,进行多个帧处理的方法。和
(3)从最初进行根据成为对象的整个帧来进行步骤11的多边形产生处理开始,接着进行步骤S12的顶点对应处理,接着进行步骤13的函数近似处理的方法。
不用说,本实施例的物体领域信息产生装置使用软件也能实现,在该情况下,根据图2的流程图形成参数,安装在计算机中,只要在计算机上运行就行。
并且,虽然在下面主要说明由函数近似处理部103进行函数近似、数据量变少、记录物体领域信息的情况,但由函数近似处理部103进行函数近似时,也可能在物体领域信息中记录各帧的每个近似图形的各顶点的坐标值(在后面的情况下也可以没有函数近似处理部103)。
下面,详细说明本实施例中的各处理。
首先,参照图3-5来说明由多边形产生部101的多边形产生处理。
图3中表示了产生表示从物体存在的帧中的物体的领域的近似多边形的处理顺序的一个实例。
首先,在步骤S21中由物体的领域产生初期多边形。
输入图像如果区分作为物体存在时为1、不存在时为0的位映象(bit map)图像(α变换)和取出只是图像中的陡边的边缘图像等物体存在部分和不存在部分时,不管利用怎样的格式都行。输入图像的实例表示为图4(a)的图像301。
从输入图像查找物体轮廓上的一点,该点是所谓的初期多边形的顶点。以该顶点作为始点,一边在短的间隔内描绘物体轮廓,一边向初期多边形追加顶点。一般而言,初期多边形虽然是顶点数非常多的多边形,但多边形的近似误差(例如,物体领域的面积和近似多边形的面积的差、该差由物体领域的面积或近似多边形的面积除,等等)具有小的特征,由图像301所得的初期多边形的实例表示为图4(b)的图像302。
在步骤S22中,根据求得的多边形的各顶点算出特征量。特征量在去除该顶点时,因为推定多边形的近似误差的程度变大,所以对于各顶点,能够使用由该顶点和与其邻接的两个顶点形成的角度和由该顶点和与其邻接的两个顶点形成的三角形的面积。
顶点和其特征量的关系的一个实例表示为图5(a)的图像304。在图像304中,设顶点ti的角度为θi,面积为si。
使用顶点ti→=(xi,yi)的特征量作为面积为si的特征量时,邻接顶点ti-1=(xi+1,yi+1),ti+1=(xi-1,yi-1)时,特征量si表示为si=|(xi+1-xi)·(yi-1,yi)-(xi-1-xi)·(yi+1,yi)|/2。
去除ti前的多边形十分近似于物体,由于去除ti增加的近似误差与si成正比。为此可以说,如果si小,则即使去除ti后影响也小。
在步骤S23中,从由步骤S22产生的特征量来选择一个去除顶点时的多边形的近似误差最小的顶点,除去该顶点。
如果去除的点为多边形的凸出部分,则由于去除顶点产生的近似误差为多边形通过进入物体内部所产生的误差的比例高。在这种情况下,通过将与去除的顶点邻接的两个顶点向多边形的外侧移动,使近似误差变小。
反之,如果去除的点为多边形的凹入部分,则由于去除顶点产生的近似误差为多边形通过超出物体外所产生的误差的比例高。在这种情况下,通过将与去除的顶点邻接的两个顶点向多边形的内侧移动,使近似误差变小。
邻接顶点的移动矢量虽然是任意的,但移动量大时,近似误差反之也变大。因此,例如由多边形的近似误差和周围的顶点的坐标等来决定。
在从多边形的近似误差来决定的情况下,一边变化移动的矢量时,一边查找最好的移动矢量(例如采用误差最小的移动矢量)。
在由周围的顶点的坐标决定的情况下,例如在去除顶点ti→时,邻接顶点ti-1→、ti+1→的移动矢量vi→为垂直于矢量ti+1→-ti-1→的矢量。并且,在决定作为具有连接ti+1→和ti-1→的直线和ti→的距离的一半长度的矢量时,ai→=ti→-ti-1→,bi→=ti+1→-ti-1→,移动矢量vi→由vi→={ai→-(ai→·bi→/|bi→|2)×bi→}/2表示。
这里,(ai→·bi→/|bi→|2)×bi→表示ai→和bi→的正投影。
去除顶点时的邻接顶点的移动矢量的实例表示为图5(b)中的图像305,使邻接顶点移动矢量分移动的实例表示为图5(c)的图像306。
通过去除顶点,移动邻接顶点,有必要更新顶点的特征量。因此,在步骤S24计算应更新的顶点的特征量并修改。应更新的顶点为在步骤S23中移动的顶点(图5的实例中为ti-1→和ti+1→)和与其邻接的顶点(图5的实例中为ti-2→和ti+2→)。
在步骤S25中,判断是否满足终止条件。
作为终止条件具有各种改变。
例如,作为终止条件有使用近似多边形的顶点数是否比指定的数多的方法。此时,如果不是指定的顶点数,则终止处理,如果超过了指定的顶点数,则返回步骤S23,为指重复步骤S23-S25直到为指定的顶点数。
另外,通过多边形的顶点数是否为指定的数来判定之外,例如还有由多边形的近似误差是否超过临界值来指定终止条件的方法。此时,多边形的近似误差超过临界值时则终止。
另外,也可以是多个条件的AND和OR等。
并且,在由函数近似处理部103进行函数近似时,最好是顶点数相同(使全部物体相同的方法和在每个物体中不同的方法)。反之,在由函数近似处理部103进行函数近似时,构成相同的顶点数。
表示由此处理得到的物体领域的近似多边形的实例表示为图(c)的图像303。
接着,参照图6、图7来说明由顶点对应形成部102进行的顶点对应处理。
在图6中,表示了对应于表示在各物体的各帧中抽出的该物体的领域的近似多边形的各顶点的处理的顺序的一个实例。
首先,在步骤S71中,表示物体的某一帧中的该物体领域的近似多边形为Pi,该帧的下一个帧(邻接帧)中的近似多边形为Pi+1时,求出这些多边形Pi、Pi+1的重心。近似多边形Pi、Pi+1和由此求出的重心的实例表示为图7(a)的图像311、321。
如果,在邻接的帧中,在存在多个物体(即其近似多边形)的情况下,那么计算着眼于该帧的物体的近似多边形Pi的重心和邻接帧中的各近似多边形的重心之间的距离,将其内具有距离最短的重心的近似多边形作为对应于该物体的近似多边形Pi+1。勿需说明,也可以用其它各种方法来相互对应近似多边形。
接着,在步骤S72中,在考虑多边形P·i使位于相邻该帧的近似多边形Pi重心的近似多边形Pi+1的重心上。多边形P·i,多边形Pi、Pi+1、P·i和各自重心的关系的实例表示为图7(b)的图像312、322。
但是,在近似多边形的重心和近似多边形的重心的距离近等的情况下,通过使近似多边形Pi的重心与近似多边形Pi+1的重心一致而不移动时,该近似多边形Pi的重心也可作为P·i。
因此,在步骤S73中,多边形P·i的各个顶点与Pi+1的各个顶点相对应。顶点对应的实例表示为图7(c)的图像313、323。
下面表示顶点对应处理的各种实例
(方法1:基于顶点间距离的方法)
在移动该帧中的近似多边形的各个多边形P·i的每个中,求出该顶点和邻接帧中的近似多边形Pi+1的各顶点的距离,将距离最短的多边形Pi+1的顶点作为对应于该顶点的顶点。
上述处理的结果是在多边形Pi+1的顶点中,通过对应于多边形P·i的顶点,例如,对应于多边形Pi的顶点中最近的顶点(这点与方法2、3相同)
(方法2:由多边形的形状来确定对应的方法)
求出各帧中的近似多边形的各顶点的特征量,特征量对应于近的顶点。作为特征量可以是由该顶点和与其邻接的2个顶点形成的三角形的面积和顶点角度等。
(方法3:由顶点的轨迹来推定对应的帧的顶点位置的方法)
通过至进行顶点对应的该帧的帧,由时间函数Tj(t)来近似对应的多边形的顶点P1,…,Pi中的号码的顶点的轨迹,由函数Tj(t)来推定该帧中的顶点位置,该帧中的多边形Pi+1的顶点中在推定顶点位置中距离最近的顶点作为对应于顶点Pj的顶点。
(方法4)
多边形P·i的顶点数和多边形Pi+1的顶点数相等的情况下,根据上述各方法(1-3)的处理结果,多边形P·i的多个顶点对应于多边形Pi+1的同一顶点的情况(在多边形Pi+1的顶点中,发生与多边形P·i的顶点对应的情况)下,不使用该对应,也可以继续应得出多边形P·i的顶点和多边形Pi+1的顶点为1对1的对应的其它对应的处理(例如,对应于多边形Pi+1的同一顶点的该多边形P·i的多个顶点中去除适当的一个,对多边形Pi+1的顶点中与多边形P·i的顶点不对应的顶点也可以变更对应)。
(方法5)
在上述各方法(1-4)中,在仅限定为多边形顶点的对应中不发生交换顶点号码的部分的对应(例如,相邻接的两个帧中的多边形的顶点之间任一个对应于向右的顺序的情况)情况下,变为交换顶点号码的对应时,不使用该对应,继续得出其它对应的处理(例如,一边变更此时的对应的部分或全部,一边返回试行错误的处理)。
(方法6)
在多边形P·i的顶点数和多边形Pi+1的顶点数相等的情况下,顶点的顺号码限定为不交换的1对1对应时,例如,求出多边形P·i的顶点和多边形Pi+1的顶点的距离中最短的距离,决定对应此时的多边形P·i的顶点和多边形Pi+1的顶点的部分,之后,将该多边形P·i顶点的右侧邻接的顶点与多边形Pi+1顶点的右侧邻接的顶点对应,后面也可以在右侧同样地对应。另外,在求出最初对应的1个顶点中,根据在多边形P·i中邻接的规定数量(多个)的顶点和在多边形Pi+1中邻接的相同数量的顶点来求出与之对应时的顶点间距离的总和,采用它为最小的该规定数量的顶点的对应,然后,将该多边形P·i的顶点右侧邻接的顶点对应于多边形Pi+1的顶点右侧邻接的顶点,后面也可以在右侧同样地对应。并且,除在最初的顶点决定中使用顶点间距离之外,也可以是使用特征量的方法和使用推定顶点位置的方法。
(方法7)
另外,在多边形P·i的顶点数和多边形Pi+1的顶点数相等的情况下,作为上述方法1的变形,在移动该帧中的近似多边形P·i的多边形Pi+1的各个顶点中,求出该顶点和邻接帧中的近似多边形的各顶点的距离,通过1对1对应来组合多边形P·i的顶点和多边形Pi+1的顶点,也可以采用将全顶点间距离的总和作为最小的顶点的对应组合。根据上述方法2和方法3,也可能有同样的变形(在方法2中,只要使用特征量的差的总和,在方法3中使用推定顶点位置和对应顶点位置的距离的总和就行)。
另外,在这时,有可能加重如上述不交换顺号码的条件、1对1对应的条件或交换顶点顺号码并1对1对应的条件。
并且,表示一个物体中从出现帧至消除帧之间的物体领域的近似多边形的顶点数由于帧而变得不同的情况下,如果进行下面的处理,则能够以与相等地情况同样地处理多边形P·i的顶点数和多边形Pi+1的顶点数。
求出作为表示物体领域的近似多边形的顶点的轨迹的顶点数为s,各帧的近似多边形的顶点数在s以下时,一帧的近似多边形的顶点数为s-Δs(Δs>0)的帧变为邻接帧时,通过将该帧的近似多边形内的一个顶点处理为多重具有同一坐标的Δs+1个顶点的顶点(或者,通过将Δs个顶点处理为多重具有同一坐标的两个顶点的顶点,或通过使用同样装置的其它对应),因此,能够使用顶点数同一时的处理(方法1-7)(首先决定作为多重化处理的顶点的方法和决定作为处理结果多重化处理的顶点的方法)。
另外,作为表示物体领域的近似多边形的顶点,设求出轨迹的顶点数为s,各帧的近似多边形的顶点数在s以下时,一帧的近似多边形的顶点数为s+Δs的帧变为邻接帧时,根据不对应于该帧的近似多边形的顶点内的Δs个顶点,通过特别将该坐标作为孤立点记录,或将该数据作为孤立点去除(该顶点不作为处理顶点)等时,因此,能够使用顶点数同一情况下的处理(方法1-7)(首先决定作为孤立点处理的顶点的处理方法和决定作为处理结果处理作为孤立点的顶点的方法)。
另外,求出作为表示物体领域的近似多边形的顶点的轨迹的顶点数为s,各帧的近似多边形的顶点数从s以下变为s以上时,该帧的近似多边形的顶点数比s小,或超过s,只要进行上述处理就行。
下面说明由函数近似处理部103进行的函数近似处理。
根据存在物体的全帧,终止上述多边形近似和顶点对应,通过函数近似各物体的近似多边形的各顶点的各坐标的轨迹来消除数据量。函数近似可以是一次近似、二次近似、通过仿样函数近似等近似方法。
图8是用来较具体地说明由函数近似处理部103通过曲线近似近似多边形的顶点轨迹的处理的概要的图。
根据图8(a),331表示成为处理对象的影像中的1帧。332为以多边形近似物体领域时的各顶点。为了简单,对于一系列帧,这里以矩形(4顶点)来近似。另外,在函数近似中,用仿样函数来说明。
在函数近似处理中,通过其每个X坐标和Y坐标中的仿样函数来近似作时系地排列表示各物体的领域的近似多边形的各顶点的轨迹。在此实例中,因为根据近似多边形的顶点分别为四顶点,X坐标和Y坐标的仿样函数变得必要,所以总共产生八个仿样函数。
并且,由函数近似处理部103的处理具有每次进行得到关于该物体领域的各帧的近似多边形的顶点的坐标值的方法(例如,每次进行得到各帧中的顶点的坐标值的近似同时求出近似误差、通过将近似误差设定在一定范围内来适当分割近似区间的方法)和得到关于该物体领域的全部帧的顶点坐标值后进行的方法。
另外,根据由顶点对应形成部102的顶点对应处理方法具有当求经过从出现该物体的领域至消除的全部帧的顶点的轨迹的情况(例如,经过全部帧后近似多边形的顶点数相等、在全部的邻接帧之间、顶点和顶点为1对1对应的对应情况),和求出从该物体领域出现至消除的全部帧内的一部分区间中存在的顶点轨迹的情况(例如,通过帧的过似多边形的顶点数变得不同,在顶点数少的帧中某顶点轨迹断开时,或经过全部帧后近似多边形的顶点数相等,为了在某一帧中对应的顶点不是1对1地对应,在该帧中某顶点顶点的轨迹断开的情况)。在后面的情况下,断开顶点的轨迹后的该帧必然成为近似函数的节点。
图8(b)的333三维地表现近似的仿样函数。
表示由此得到的近似函数的数据以事先设定的数据形式存储在物体领域信息存储部104中。
下面,说明存储在物体领域信息存储部104中的物体领域信息的数据形式。并且,在这里,虽然举例说明了由仿样函数近似顶点的情况,勿需多言,由其它函数近似的情况也是同样的。
图9中表示了记录表示影像中物体领域的仿样函数用的物体领域信息的数据形式的一个实例。
ID号码400为赋予物体的识别号码。
开始帧号码401和最终帧号码402为定义该ID号码的物体的存在的最初和最后的帧号码,具体而言,为在影像中出现物体至消失的帧号码。但是,实际上不是在影像中出现物体至消失的帧号码,例如,可以将在影像中物体出现之后的任意的帧号码作为开始帧号码,另外,可以将在开始帧号码之后中的影像中物体消失前的任意帧号码作为最终帧号码。另外,开始/最终帧号码能够被开始/最终时间标志替代。
近似多边形数据403为表现近似多边形用的顶点的轨迹数据(例如仿样函数的参数等)。另外,由多个物体领域构成一个物体的情况下,将近似多边形数据403变为具有多个的数据。
下面,图10表示了近似多边形数据(403)的数据结构的一个实例。
顶点数431表示表现近似多边形的顶点的数量。
一组顶点轨迹数据432-1、432-1为表现近似多边形的代表点的轨迹的关于仿样函数的数据领域。对于一个顶点,X坐标、Y坐标的仿样函数数据变得有必要。因此,特定仿样函数的顶点轨迹数据仅存在顶点数(M)×2。另外,记录顶点的顺序例如是沿外周的顺序等事先决定的顺序。
下面,图11表示了顶点轨迹数据(432-1、432-2)的数据结构的一个实例。
节点帧号码432D表示仿样函数的节点,还表示至该节点的多项式的数据4323是有效的。多项式的系数数据的数量通过仿样函数的最高次数来变化(最高次数为K时,系数数据的数量为K+1)。为此,参照多项式次数4321。在多项式次数4321之后,接着是相当于多项次数+1个的数量的多项式系数4322。
另外,因为在节点间以其它多项式来表现仿样函数,对应于节点数的数量的多项式就变得必要。因此,多次返回记述包含节点帧号码、多顶式系数等的数据4323。节点帧号码变为与最终帧相等时,因为它表示为最后的多项式系数数据,所以代表点轨迹数据终止。
并且,根据所述变形,在通过某帧的近似多边形的某顶点来对应取记录该坐标时,在数据4323中记述该顶点的坐标和该帧的号码。
换言之,也可以向图9的物体领域信息中附加其它各种信息。例如,也可以附加与该ID号码的物体关联的各种属性信息,和表示关联于该ID号码的物体的关联信息数据的访问方法的信息(文件名和URL和其它地址等)。关联信息数据也可以是文字、声音、静止图像、活动图像或它们的适当组合,也可以是程序和记述计算机动作的数据。
另外,在函数近似处理部103不进行函数近似时,例如,在图9的近似多边形数据中,也可以记录各帧的每个近似图形的各顶点的坐标值。
下面说明影像数据和物体领域信息的提供方法。
在向用户提供由本实施例处理所形成的物体领域信息时,用什么方法从形成方处向用户提供物体领域信息是有必要的。作为该提供方法可以是下面示例的各种形态。
(1)在一个或多个记录媒体中记录并同时提供影像数据和其物体领域信息的形态
(2)单独提供影像数据,另外,在一个或多个记录媒体中记录并同时提供物体领域信息的形态
虽然上述主要是在由记录媒体来提供的情况,但除此以外也可考虑由通信媒体来提供部分或全部的形态。
根据上述实施例,能够高精度快速地多边形近似影像中所期望物体的领域的大小、形状、移动、变形等。另外,也能够用少的数据量来记述影像中所期望的物体的领域并容易地进行其形成和其数据的处理。因此,根据影像数据库和监视系统等,能够有效地利用于物体的识别、分类、检索等。
另外,根据本实施例,在由于各帧而使顶点数变得不同和由于物体的变形、移动等而使帧间的顶点多个对应的情况下,能够进行适当的函数近似。
另外,能够将影像中的物体领域记述为近似其近似多边形的顶点的顺序的轨迹(将帧号码或时间标志作为变量的顶点的坐标轨迹)的曲线的参数。因此,因为能够通过函数的参数来表现影像中的物体领域,所以数据量少,能够产生操作容易的物体领域信息。另外,能够容易地进行由近似曲线的参数产生近似多边形。
(实施例2)
下面说明本发明的实施例2的物体领域信息产生装置。
本实施例基本上与实施例1相同,下面主要说明与实施例1不同的部分。
在实施例1中,在相邻接的两帧中由物体领域求得近似多边形的顶点后,虽然求出了两帧的近似多边形的顶点的对应,但在本实施例中,利用已求得的前面的帧中的近似多边形的各对应顶点的轨迹,求出作为对象的帧中的近似多边形的各对应顶点,例如根据流影像等有效地一边进行影像输入一边进行处理。
本实施例的物体领域信息产生装置的构成实例与图1相同。
另外,由本实施例的物体领域信息产生装置的处理流程的一个实例与图2相同。但是,步骤S11的多边形产生处理中,根据物体出现的最初的1帧来进行该处理。另外,对于最初规定数量(多个)的帧,根据实施例1中的步骤S11、S12的求出经过近似多边形的顶点和多个帧的顶点的对应。下面,通过本实施例中的步骤S12的处理来依次求出后续帧中的近似多边形的顶点。
下面,参照图12、13来说明由本实施例中的顶点对应形成部102进行的顶点对应处理。
首先,在步骤S81中,对于一个物体,由图13(a)的601将已经产生的多个帧(例如全部帧或附近的一定数据的帧)的近似多边形的各顶点的轨迹近似为时间的函数。该函数近似可以使用一次近似、二次近似、仿样近似等近似方法。
下面,在步骤S82中,推定近似函数应处理的帧中的顶点位置,产生由此应产生的帧中的推定多边形(的顶点)。推定的近似多边形的实例表示为图13(b)的602。
并且,在各帧中的物体的移动量小的情况下,不进行函数近似,将最近的帧的近似多边形的顶点作为该推定的多边形(的顶点)。
另外,当物体的移动量大而变形小时,由已产生的多个帧的近似多边形的重心来推定应产生的帧中的近似多边形的重心,当最近的帧的近似多边形的重心与推定的重心一致时移动该多边形,将其作为推定的近似多边形来使用。
并且,在处理的初期阶段,处理的帧数量少时,仅在该少的帧中进行步骤S81、S82,并且在进行步骤S81的近似时,刚好在其前的帧在的近似多边形也可作为推定的多边形。另外,在最初求得一帧的近似多边形时或处理的帧数量少时,进行步骤S81的近似,将刚好在其前的帧中的近似多边形作为推定的多边形。
接着,在步骤S83中,读入应处理的帧的物体领域,在物体领域内处理移动推定的近似多边形的各顶点。应处理的帧的物体领域的实例表示为图13(c)的603。
作为移动方法包括在各顶点中从该推定的位置在最近的物体轮廓上的位置中移动,或使用近似误差最小的梯度法和牛顿法等参数最适合方法来移动等各种方法。
并且,在邻接的帧中,在物体(即其近似多边形)存在多个时,与第1实施例相同,根据该帧使用对应于目的物体的并被判断的物体领域。
如此适合于物体中各顶点并移动的实例表示为图13(d)的604,另外移动后产生的近似多边形的实例表示为图13(e)的605。
并且,根据由函数近似处理部103的函数近似处理与实施例1相同。
另外,由函数近似处理部103进行的函数近似时,也可能在物体领域信息中记录各帧的每个的似图形的各顶点的坐标值(在后者的情况下,也可以没有函数近似处理部103)。
并且,以上的各功能也可以作为软件实现。
另外,本实施例也能够实施将执行计算机中规定方法用的(或将计算机作为规定的机能用的、或实现计算机中规定的机能用的)程序作为记录的计算机可读取的记录媒体。
本发明不限于上述实施例,根据其技术范围能够进行各种变形。
Claims (18)
1.一种经过连续涉及影像数据中的任意物体的领域的信息的多个帧后产生记述的物体领域信息的物体领域信息产生方法,其特征在于:
在各个所述的多个帧中,使用近似多边形来近似所述影像数据中的所述物体的领域;
在各个所述帧的相邻帧之间,对于近似前面的帧中的所述物体的领域的近似多边形的多个顶点中的每一个,近似下一帧中的所述物体的领域的近似多边形的多个顶点中,通过对应于重合两近似多边形的重心时的顶点间距离最小,求出多个顶点中沿帧的行进排列多个顶点中的顶点位置数据时的轨迹;
基于求出的所述多个顶点的轨迹,产生所述物体领域信息。
2.一种经过连续涉及影像数据中的任意物体的领域的信息的多个帧后产生记述的物体领域信息的物体领域信息产生方法,其特征在于:
在各个所述的多个帧中,使用近似多边形来近似所述影像数据中的所述物体的领域;
在各个所述帧的相邻帧之间,对于近似前面的帧中的所述物体的领域的近似多边形的多个顶点中的每一个,近似下一帧中的所述物体的领域的近似多边形的多个顶点中,通过对应于由至已求出的前面帧中的该顶点的轨迹推定的位置中最近的位置,求出多个顶点中沿帧的行进排列多个顶点中的顶点位置数据时的轨迹;
基于求出的所述多个顶点的轨迹,产生所述物体领域信息。
3.一种经过连续涉及影像数据中的任意物体的领域的信息的多个帧后产生记述的物体领域信息的物体领域信息产生方法,其特征在于:
在各个所述的多个帧中,使用近似多边形来近似所述影像数据中的所述物体的领域;
在各个所述帧的相邻帧之间,对于近似前面的帧中的所述物体的领域的近似多边形的多个顶点中的每一个,近似下一帧中的所述物体的领域的近似多边形的多个顶点中,通过对应于具有与前面帧中的该顶点具有的特征量最接近的特征量,求出多个顶点中沿帧的行进排列多个顶点中的顶点位置数据时的轨迹;
基于求出的所述多个顶点的轨迹,产生所述物体领域信息。
4.一种经过连续涉及影像数据中的任意物体的领域的信息的多个帧后产生记述的物体领域信息的物体领域信息产生方法,其特征在于:
基于表示近似经过已产生的刚好在前面的帧之前的帧的所述物体的领域的近似多边形的多个顶点的位置数据的轨迹的信息,推定近似该帧中的所述物体的领域的近似多边形的多个顶点的位置数据,通过修正这些推定的多个顶点位置数据以与该帧中的上述物体的领域相适合,进行产生表示近似从前面帧起至该帧止的所述物体的领域的近似多边形的多个顶点的位置数据的轨迹的信息的处理;
基于通过经过所述多个帧重复所述处理求出的所述多个顶点的轨迹,产生所述物体领域信息。
5.如权利要求1-4中任一项所述的物体领域信息产生方法,其特征在于:通过各个规定的函数来近似求出的所述多个顶点的轨迹,使用该函数的参数产生所述物体领域信息。
6.如权利要求1-4中任一项所述的物体领域信息产生方法,其特征在于:作为表示求出的所述多个顶点的轨迹的信息,应在所述物体领域信息中记述各所述帧中的顶点位置数据和邻接帧之间的顶点的对应关系。
7.如权利要求1-6中任一项所述的物体领域信息产生方法,其特征在于:由1个或多个物体领域产生影像数据的物体领域信息存储在记录媒体中。
8.一种产生近似影像或图像的1个帧中的任意物体领域的近似多边形的近似多边形产生方法,其特征在于:
取出影像或图像的1个帧中的所述物体的领域轮廓,基于该取出的轮廓,产生表示该物体领域的初期的多边形;
基于此时的多边形的各顶点的特征量来选择应去除的顶点,去除选择的顶点,并且移动与去除的顶点邻接的顶点,进行更新所述多边形的各顶点的特征量的处理;
通过在满足规定的终止条件前重复进行所述处理,产生近似该帧中的所述物体领域的近似多边形。
9.一种经过连续涉及影像数据中的任意物体的领域的信息的多个帧后产生记述的物体领域信息的物体领域信息产生装置,其特征在于:包括
在各个所述的多个帧中,使用近似多边形来近似所述影像数据中的所述物体的领域的装置;
在各个所述帧的相邻帧之间,对于近似前面的帧中的所述物体的领域的近似多边形的多个顶点中的每一个,近似下一帧中的所述物体的领域的近似多边形的多个顶点中,通过对应于重合两近似多边形的重心时的顶点间距离最小,求出多个顶点中沿帧的行进排列多个顶点中的顶点位置数据时的轨迹的装置;和
基于求出的所述多个顶点的轨迹,产生所述物体领域信息的装置。
10.一种经过连续涉及影像数据中的任意物体的领域的信息的多个帧后产生记述的物体领域信息的物体领域信息产生装置,其特征在于:包括
在各个所述的多个帧中,使用近似多边形来近似所述影像数据中的所述物体的领域的装置;
在各个所述帧的相邻帧之间,对于近似前面的帧中的所述物体的领域的近似多边形的多个顶点中的每一个,近似下一帧中的所述物体的领域的近似多边形的多个顶点中,通过对应于由至已求出的前面帧中的该顶点的轨迹推定的位置中最近的位置,求出多个顶点中沿帧的行进排列多个顶点中的顶点位置数据时的轨迹的装置;和
基于求出的所述多个顶点的轨迹,产生所述物体领域信息的装置。
11.一种经过连续的涉及影像数据中的任意物体的领域的信息的多个帧后产生记述的物体领域信息的物体领域信息产生装置,其特征在于:包括
在各个所述的多个帧中,使用近似多边形来近似所述影像数据中的所述物体的领域的装置;
在各个所述帧的相邻帧之间,对于近似前面的帧中的所述物体的领域的近似多边形的多个顶点中的每一个,近似下一帧中的所述物体的领域的近似多边形的多个顶点中,通过对应于具有与前面帧中的该顶点具有的特征量最接近的特征量,求出多个顶点中沿帧的行进排列多个顶点中的顶点位置数据时的轨迹的装置;和
基于求出的所述多个顶点的轨迹,产生所述物体领域信息的装置。
12.一种经过连续的涉及影像数据中的任意物体的领域的信息的多个帧后产生记述的物体领域信息的物体领域信息产生方法,其特征在于:基于表示近似经过已产生的刚好在前面的帧之前的帧的所述物体的领域的近似多边形的多个顶点的位置数据的轨迹的信息,推定近似该帧中的所述物体的领域的近似多边形的多个顶点的位置数据,通过修正这些推定的多个顶点位置数据以与该帧中的上述物体的领域相适合,进行产生表示近似从前面帧起至该帧止的所述物体的领域的近似多边形的多个顶点的位置数据的轨迹的信息的处理;
基于通过经过所述多个帧重复所速处理求出的所述多个顶点的轨迹,产生所述物体领域信息。
13.一种产生近似影像或图像的1个帧中的任意物体的领域的近似多边形的近似多边形产生装置,其特征在于:包括
取出影像或图像中的1个帧中的所述物体领域轮廊,基于该取出的轮廓产生表示该物体的领域的初期多边形的装置;
在此时基于多边形的各顶点的特征量来选择应去除的顶点,去除选择的顶点并移动与去除的顶点邻接的顶点,进行更新处理所述多边形的各顶点的特征量的装置;和
通过在满足规定的终止条件时返回上述处理,产生近似该帧中的所述物体的领域的近似多边形的装置。
14.一种记录经过连续涉及影像数据中的任意物体的领域的信息的多个帧产生所述物体领域信息用的程序的计算机能够读取的记录媒体,
根据所述多个帧的每一个使用近似多边形来近似所述影像数据中的所述物体的领域;
在各个所述帧的相邻帧之间,对于近似前面的帧中的所述物体的领域的近似多边形的多个顶点中的每一个,近似下一帧中的所述物体的领域的近似多边形的多个顶点中,通过对应于重合两近似多边形的重心时的顶点间距离最小,求出多个顶点中沿帧的行进排列多个顶点中的顶点位置数据时的轨迹;
基于求出的所述多个顶点的轨迹,产生所述物体领域信息用的程序。
15.一种记录经过连续涉及影像数据中的任意物体的领域的信息的多个帧产生所述物体领域信息用的程序的计算机能够读取的记录媒体,
对于所述多个帧的每一个使用近似多边形来近似所述影像数据中的所述物体的领域;
在各个所述帧的相邻帧之间,对于近似前面的帧中的所述物体的领域的近似多边形的多个顶点中的每一个,近似下一帧中的所述物体的领域的近似多边形的多个顶点中,通过对应于由至已求出的前面帧中的该顶点的轨迹推定的位置中最近的位置,求出多个顶点中沿帧的行进排列多个顶点中的顶点位置数据时的轨迹;
基于求出的所述多个顶点的轨迹,产生所述物体领域信息用的程序。
16.一种记录经过连续涉及影像数据中的任意物体的领域的信息的多个帧产生所述物体领域信息用的程序的计算机能够读取的记录媒体,
对于所述多个帧的每一个使用近似多边形来近似所述影像数据中的所述物体的领域;
在各个所述帧的相邻帧之间,对于近似前面的帧中的所述物体的领域的近似多边形的多个顶点中的每一个,近似下一帧中的所述物体的领域的近似多边形的多个顶点中,通过对应于具有与前面帧中的该顶点具有的特征量最接近的特征量,求出多个顶点中沿帧的行进排列多个顶点中的顶点位置数据时的轨迹;
基于求出的所述多个顶点的轨迹,产生所述物体领域信息用的程序。
17.一种记录经过连续涉及影像数据中的任意物体的领域的信息的多个帧产生所述物体领域信息用的程序的计算机能够读取的记录媒体,
基于表示近似经过已产生的刚好在前面的帧之前的帧的所述物体的领域的近似多边形的多个顶点的位置数据的轨迹的信息,推定近似该帧中的所述物体的领域的近似多边形的多个顶点的位置数据,通过修正这些推定的多个顶点位置数据以与该帧中的上述物体的领域相适合,进行产生表示近似从前面帧起至该帧止的所述物体的领域的近似多边形的多个顶点的位置数据的轨迹的信息的处理;
基于通过经过所述多个帧重复所述处理求出的所述多个顶点的轨迹,产生所述物体领域信息用的程序。
18.一种记录用于产生近似影像或图像的1个帧中的任意物体的领域的近似多边形的近似多边形产生装置的程序的计算机能够读取的记录媒体,
取出影像或图像的1个帧中的所述物体的领域轮廓,基于该取出的轮廓,产生表示该物体领域的初期的多边形;
基于此时的多边形的各顶点的特征量来选择应去除的顶点,去除选择的顶点,并且移动与去除的顶点邻接的顶点,进行更新所述多边形的各顶点的特征量的处理;
通过在满足规定的终止条件后重复进行所述处理,产生近似该帧中的所述物体领域的近似多边形用的程序。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP077161/2000 | 2000-03-17 | ||
JP2000077161A JP2001266159A (ja) | 2000-03-17 | 2000-03-17 | 物体領域情報生成方法及び物体領域情報生成装置並びに近似多角形生成方法及び近似多角形生成装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN1318815A true CN1318815A (zh) | 2001-10-24 |
CN1227624C CN1227624C (zh) | 2005-11-16 |
Family
ID=18594775
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNB011192933A Expired - Fee Related CN1227624C (zh) | 2000-03-17 | 2001-03-16 | 物体领域信息产生方法和设备 |
Country Status (6)
Country | Link |
---|---|
US (1) | US20010025298A1 (zh) |
EP (1) | EP1134984B1 (zh) |
JP (1) | JP2001266159A (zh) |
KR (1) | KR100427879B1 (zh) |
CN (1) | CN1227624C (zh) |
DE (1) | DE60131796T2 (zh) |
Families Citing this family (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4226730B2 (ja) * | 1999-01-28 | 2009-02-18 | 株式会社東芝 | 物体領域情報生成方法及び物体領域情報生成装置並びに映像情報処理方法及び情報処理装置 |
EP1418546A1 (en) * | 2002-11-07 | 2004-05-12 | Mitsubishi Electric Information Technology Centre Europe B.V. | Method and apparatus for representing moving objects in a sequence of images |
JP4836065B2 (ja) * | 2005-03-31 | 2011-12-14 | 株式会社国際電気通信基礎技術研究所 | エッジトラッキング方法及びそのコンピュータプログラム |
TWI280061B (en) | 2005-04-27 | 2007-04-21 | Novatek Microelectronics Corp | Image processing method and device thereof |
JP5326910B2 (ja) * | 2009-01-20 | 2013-10-30 | ソニー株式会社 | 情報処理装置、情報処理方法およびプログラム |
KR101009379B1 (ko) * | 2009-05-27 | 2011-01-19 | 주식회사 매크로그래프 | Reyes 알고리즘의 내부 매개 변수를 이용한 마이크로폴리곤 구성방법 |
JP5423286B2 (ja) * | 2009-09-29 | 2014-02-19 | 凸版印刷株式会社 | パターンデータ変換方法 |
JP6086188B2 (ja) * | 2012-09-04 | 2017-03-01 | ソニー株式会社 | 音響効果調整装置および方法、並びにプログラム |
JP6098286B2 (ja) * | 2013-03-28 | 2017-03-22 | 大日本印刷株式会社 | 対応点決定装置、対応点決定方法、及びプログラム |
JP6261190B2 (ja) * | 2013-05-31 | 2018-01-17 | キヤノン株式会社 | 設定装置および設定方法 |
GB2518897A (en) * | 2013-10-07 | 2015-04-08 | Univ Newcastle | Test for distinguishing between a human and a computer program |
TW201519161A (zh) * | 2013-11-07 | 2015-05-16 | Inst Information Industry | 電子裝置及其影片物體移動軌跡修正方法 |
TWI570666B (zh) * | 2013-11-15 | 2017-02-11 | 財團法人資訊工業策進會 | 電子裝置及其影片物體追蹤方法 |
CN117077501B (zh) * | 2023-10-17 | 2024-01-09 | 中南大学 | 一种非均质钢渣混凝土渗透系数计算方法 |
Family Cites Families (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH04184575A (ja) * | 1990-11-20 | 1992-07-01 | Fujitsu Ltd | 時系列画像の輪郭線対応方法および装置 |
JPH0746595A (ja) * | 1993-05-21 | 1995-02-14 | Nippon Telegr & Teleph Corp <Ntt> | 動画像符号化器および復号化器 |
JPH07210688A (ja) * | 1994-01-26 | 1995-08-11 | Fuji Photo Film Co Ltd | 多角形面積算出装置 |
JP3738456B2 (ja) * | 1994-11-14 | 2006-01-25 | マツダ株式会社 | 物品の位置検出方法およびその装置 |
US5799109A (en) * | 1994-12-29 | 1998-08-25 | Hyundai Electronics Industries Co., Ltd. | Object-by shape information compression apparatus and method and coding method between motion picture compensation frames |
KR100235343B1 (ko) * | 1994-12-29 | 1999-12-15 | 전주범 | 영역분할 기법을 이용한 동영상신호 부호화기의 움직임 벡터 측정장치 |
KR100235345B1 (ko) * | 1994-12-29 | 1999-12-15 | 전주범 | 분할영역에서의 움직임 추정방법 및 장치 |
US5691769A (en) * | 1995-09-07 | 1997-11-25 | Daewoo Electronics Co, Ltd. | Apparatus for encoding a contour of an object |
US6026182A (en) * | 1995-10-05 | 2000-02-15 | Microsoft Corporation | Feature segmentation |
US5970504A (en) * | 1996-01-31 | 1999-10-19 | Mitsubishi Denki Kabushiki Kaisha | Moving image anchoring apparatus and hypermedia apparatus which estimate the movement of an anchor based on the movement of the object with which the anchor is associated |
US5778098A (en) * | 1996-03-22 | 1998-07-07 | Microsoft Corporation | Sprite coding |
JP3750184B2 (ja) * | 1996-04-03 | 2006-03-01 | 松下電器産業株式会社 | 移動物体の抽出装置及び抽出方法 |
KR100203656B1 (ko) * | 1996-04-09 | 1999-06-15 | 전주범 | 윤곽 영상신호 부호화 장치 |
US5982909A (en) * | 1996-04-23 | 1999-11-09 | Eastman Kodak Company | Method for region tracking in an image sequence using a two-dimensional mesh |
KR100249029B1 (ko) * | 1996-06-12 | 2000-03-15 | 전주범 | 영상신호의 윤곽선 부호화 방법 및 그 장치 |
US5793893A (en) * | 1996-09-23 | 1998-08-11 | Daewoo Electronics Co., Ltd. | Method and apparatus for encoding a contour image of an object in a video signal |
US5883977A (en) * | 1996-12-30 | 1999-03-16 | Daewoo Electronics Co., Ltd. | Method and apparatus for encoding a video signal of a contour of an object |
US5978510A (en) * | 1997-03-20 | 1999-11-02 | Hyundai Electronics Industries Co., Ltd. | Method and apparatus for predictively coding contour of video signal |
KR100229546B1 (ko) * | 1997-04-11 | 1999-11-15 | 전주범 | 윤곽선 비디오 신호 부호화 방법 및 그 장치 |
KR100229544B1 (ko) * | 1997-04-11 | 1999-11-15 | 전주범 | 움직임 추정기법을 이용한 윤곽선 부호화 장치 |
KR100244769B1 (ko) * | 1997-06-26 | 2000-02-15 | 전주범 | 스케일러빌리티를 갖는 간 윤곽선 부호화 방법 및 장치 |
JP3735187B2 (ja) * | 1997-08-27 | 2006-01-18 | 富士通株式会社 | 時系列データの符号化と編集を行うデータ変換装置および方法 |
WO1999064944A2 (en) * | 1998-06-08 | 1999-12-16 | Microsoft Corporation | Compression of time-dependent geometry |
JP4226730B2 (ja) * | 1999-01-28 | 2009-02-18 | 株式会社東芝 | 物体領域情報生成方法及び物体領域情報生成装置並びに映像情報処理方法及び情報処理装置 |
JP2000251086A (ja) * | 1999-02-26 | 2000-09-14 | Sony Corp | 曲線生成装置及び方法、並びにプログラム提供媒体 |
KR100415266B1 (ko) * | 2000-05-11 | 2004-01-16 | 가부시끼가이샤 도시바 | 물체영역정보 기술방법과 물체영역정보 생성장치 및 기록매체 |
-
2000
- 2000-03-17 JP JP2000077161A patent/JP2001266159A/ja not_active Abandoned
-
2001
- 2001-03-16 CN CNB011192933A patent/CN1227624C/zh not_active Expired - Fee Related
- 2001-03-16 EP EP20010302458 patent/EP1134984B1/en not_active Expired - Lifetime
- 2001-03-16 US US09/808,988 patent/US20010025298A1/en not_active Abandoned
- 2001-03-16 KR KR10-2001-0013613A patent/KR100427879B1/ko not_active IP Right Cessation
- 2001-03-16 DE DE2001631796 patent/DE60131796T2/de not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
EP1134984A2 (en) | 2001-09-19 |
EP1134984B1 (en) | 2007-12-12 |
KR100427879B1 (ko) | 2004-04-27 |
DE60131796D1 (de) | 2008-01-24 |
EP1134984A3 (en) | 2003-10-22 |
CN1227624C (zh) | 2005-11-16 |
JP2001266159A (ja) | 2001-09-28 |
KR20010090466A (ko) | 2001-10-18 |
US20010025298A1 (en) | 2001-09-27 |
DE60131796T2 (de) | 2008-12-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN1227624C (zh) | 物体领域信息产生方法和设备 | |
CN1258154C (zh) | 多处理器系统、数据处理系统和数据处理方法 | |
CN1213382C (zh) | 用于从多值图象提取划线的设备 | |
CN1260673C (zh) | 2维码读取方法和读取装置、数字照相机及其便携终端 | |
CN1925609A (zh) | 影像处理装置 | |
CN1162788C (zh) | 可换存储媒体和控制方法及计算机系统 | |
CN100342399C (zh) | 提取用作面貌识别和重现的特征向量的方法和装置 | |
CN101055620A (zh) | 形状比较装置和方法 | |
CN1412721A (zh) | 用于记录和信息处理的改进方法和装置及其记录介质 | |
CN1231868C (zh) | 图案评价方法和图案评价装置 | |
CN1114921C (zh) | 目标流的临时删除方法 | |
CN1945580A (zh) | 图像处理装置 | |
CN1669052A (zh) | 使用三维物体模型的图像匹配系统、图像匹配方法以及图像匹配程序 | |
CN1942899A (zh) | 脸图像制作装置和方法 | |
CN1496535A (zh) | 图像处理装置和图像处理方法、存储介质及计算机程序 | |
CN1766874A (zh) | 规则发现程序、规则发现处理和规则发现装置 | |
CN1102278C (zh) | 字符图形产生装置和方法 | |
CN101038676A (zh) | 图像处理装置和图像处理方法 | |
CN1815507A (zh) | 变换对象的图形数据的方法、设备和介质 | |
CN1932836A (zh) | 网格方向、比例、变换和调制估算 | |
CN1338861A (zh) | 图像译码方法、图像译码装置和数据存储媒体 | |
CN101038664A (zh) | 图像处理设备和图像处理方法 | |
CN1290322C (zh) | 再生装置 | |
CN1658315A (zh) | 光学记录介质、记录/再现设备、和记录/再现方法 | |
CN100341028C (zh) | 模式分段装置及其方法和模式识别装置及其方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C06 | Publication | ||
PB01 | Publication | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
C17 | Cessation of patent right | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20051116 Termination date: 20100316 |