DE10361838B3 - Verfahren zur Bewertung von Ähnlichkeiten realer Objekte - Google Patents

Verfahren zur Bewertung von Ähnlichkeiten realer Objekte Download PDF

Info

Publication number
DE10361838B3
DE10361838B3 DE10361838A DE10361838A DE10361838B3 DE 10361838 B3 DE10361838 B3 DE 10361838B3 DE 10361838 A DE10361838 A DE 10361838A DE 10361838 A DE10361838 A DE 10361838A DE 10361838 B3 DE10361838 B3 DE 10361838B3
Authority
DE
Germany
Prior art keywords
contour
similarity
max
vectors
contours
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
DE10361838A
Other languages
English (en)
Inventor
Carsten Prodöhl
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ruhr Universitaet Bochum
Original Assignee
Ruhr Universitaet Bochum
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ruhr Universitaet Bochum filed Critical Ruhr Universitaet Bochum
Priority to DE10361838A priority Critical patent/DE10361838B3/de
Priority to PCT/DE2004/002461 priority patent/WO2005064526A1/de
Application granted granted Critical
Publication of DE10361838B3 publication Critical patent/DE10361838B3/de
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/30Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/37Determination of transform parameters for the alignment of images, i.e. image registration using transform domain methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/46Descriptors for shape, contour or point-related descriptors, e.g. scale invariant feature transform [SIFT] or bags of words [BoW]; Salient regional features
    • G06V10/478Contour-based spectral representations or scale-space representations, e.g. by Fourier analysis, wavelet analysis or curvature scale-space [CSS]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20048Transform domain processing
    • G06T2207/20056Discrete and fast Fourier transform, [DFT, FFT]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • G06T2207/30201Face

Abstract

Die Erfindung betrifft ein Verfahren zur Bewertung von Ähnlichkeiten realer Objekte anhand der Bewertung der Ähnlichkeiten von Merkmalsvektoren. Hierzu werden aus den D2-Konturen der miteinander zu vergleichenden ersten und zweite Objekte Sätze eindimensionaler parametrisierter Daten (Merkmalsvektoren) gewonnen, die Grundlage der Vergleichsoperation sind. Die Berechnung der Ähnlichkeit der Merkmalsvektoren erfolgt unter Berücksichtigung der Phasenähnlichkeit der einzelnen Vektorkomponenten in der komplexen Ebene. Für jeden komplexen Koeffizienten des Merkmalsvektors werden getrennt nach X- und Y-Merkmalen die Ähnlichkeiten berechnet und anschließend die Ergebnisse multipliziert, so dass sich eine hohe Ähnlichkeit nur dann ergibt, wenn sowohl die Ähnlichkeit der jeweiligen komplexwertigen X-Koeffizienten in Verbindung mit der Ähnlichkeit der komplexwertigen Y-Koeffizienten hoch ist. Das erfindungsgemäße Verfahren ermöglicht eine translations- und skalierungsinvariante, mit der menschlichen Wahrnehmung vergleichbare Erkennung von partiell vorhandenen oder durch zusätzliche Informationen bzw. Störungen erweiterten Daten.

Description

  • Die Erfindung betrifft ein Verfahren zur Bewertung von Ähnlichkeiten realer Objekte anhand der Bewertung der Ähnlichkeit von Merkmalsvektoren.
  • Auf dem Gebiet der Bildverarbeitung sind Verfahren bekannt, die eine Erkennung von Objekten aus einzelnen Ansichten (Bildern) dieser Objekte erlauben. Die Erkennung von Objekten wird mittels digitaler Bildsignalaufnahmetechnik ausgeführt, der Bild- und Signalverarbeitungsroutinen für die Klassifizierung der Objekte oder Muster hinzugefügt werden. Die Routinen verwenden Verfahren, bei denen die in den digitalen Bildern vorkommenden Bildobjekte anhand von spezifischen Merkmalen analysiert werden. Aufgrund der extrahierten Merkmale erfolgt ein Abgleich verschiedener Objekte, um Ähnlichkeiten festzustellen.
  • In der DE 44 06 020 C1 wird ein Bild verarbeitendes Verfahren zur automatisierten Erkennung oder Verifikation von Objekten aus digitalen Bildern dieser Objekte beschrieben. Dieses Verfahren ist dadurch gekennzeichnet, dass man aus einem digitalen Bild mit 2-D-Gabor-Filtern verschiedener Größe und Orientierung Gabor-Merkmale extrahiert, welche auf einem verschieb-, skalier-, und deformierbaren Gitter, dem so genannten Graphen, angeordnet werden, dessen optimale Form durch eine zweiphasige Minimierung einer Graphenvergleichsfunktion bestimmt wird. In der ersten Phase werden sowohl Größe als auch Position des Graphen simultan optimiert. In der zweiten Phase wird die intrinsische Form des Graphen optimiert. Zur Bewertung der Ähnlichkeit zweier Graphen wird eine Graphenvergleichsfunktion E = Esin + λEtop eingeführt, die umso niedrigere Werte annimmt, je ähnlicher die beiden Graphen sind. Ein erster Term dieser Graphenvergleichsfunktion bewertet die Ähnlichkeit der Jets (Gesamtheit der Gabor-Merkmale an einem bestimmten Pixel) an jeweils korrespondierenden Knoten der beiden Graphen, wobei die jeweils korrespondierenden Gabor-Merkmale miteinander verglichen werden (negativer Kosinus des Winkels zwischen beiden Jets). Der zweite Term bewertet die topologische Ähnlichkeit beider Graphen, indem die Beträge der Differenzvektoren jeweils korrespondierender Links aufsummiert werden. Als Links werden die horizontalen und vertikalen Verbindungen zwischen benachbarten Knoten bezeichnet. Ein anschauliches Modell besteht darin, sich die Links als mechanische Federn vorzustellen, die in ihren Ruhelagen den ersten der beiden Graphen bilden. Der zweite Faktor der Graphenvergleichsfunktion ist dann proportional zur Arbeit, die gegen die Federkräfte aufgebracht werden muss, um die Links mit der Topologie des zweiten Graphen zur Deckung zu bringen. Werden beim Vergleich eines neuen Objektbildes mit gespeicherten Objekten entsprechende Werte der Graphenvergleichsfunktionen ermittelt, so ist das Objekt mit dem kleinsten Wert der Graphenvergleichsfunktion im Sinne der Vergleichsfunktion das ähnlichste Objekt. Dieses Verfahren basiert auf der Extraktion von 2-D-Gabor-Koeffizienten, die nicht nur verschiedenen Sigmas (Größen) entsprechen, sondern auch noch verschiedene Orientierungen im Raum haben. Dieses Verfahren eignet sich besonders gut für Objekte mit charakteristischen Texturmerkmalen, wie z.B. Gesichtern. An den Rändern der Objekte ist dieses Verfahren weniger leistungsstark, da der 2-dimensionale Gabor-Filter zur einen Hälfte das zu erkennende Objekt bedeckt und zur anderen Hälfte den Hintergrund bedeckt, so dass die Ränder des Objekts, z.B. eine Kontur eines Gesichts nur unscharf erkannt werden können.
  • Aus der WO 02/43004 A2 ist es bekannt, Objektkonturen mittels Basisfunktionen, wie z.B. Gabor-Wavelets zu transformieren und die Ähnlichkeit der Objekte mittels der Phasen und Amplituden der Transformierten zu ermitteln. Weitere Verfahren zur Bewertung der Ähnlichkeit realer Objekte sind aus der US 6,618,501 B1 und aus dem Artikel "Shape recognition based on wavelet-transform modulus maxima" (Cheikh, F.; Quddus, A.; Gabbouj, M.; Electronics, Circuits and Systems, 2000. ICECS 2000. The 7th IEEE International Conference on, Volume: 1, 17–20 Dec. 2000) bekannt. Bei diesem Verfahren wird eine Kette von Stützpunkten entlang der Objektkontur erzeugt. Die Stützpunkte werden nach einem Satz von Basisfunktionen transformiert und die Ähnlichkeit anhand der Transformierten bestimmt.
  • Hiervon ausgehend liegt der Erfindung die Aufgabe zugrunde, ein Verfahren zur Bewertung der Ähnlichkeit von Merkmalsvektoren zur Beschreibung realer Objekte in Form von Signalen mit ortsabhängig variierenden Eigenschaften, insbesondere für eine 2-D-Konturerkennung bereit zu stellen, bei welchem die Konturen der Objekte bzw. dessen Randlinien ähnlich zur menschlichen Wahrnehmung vergleichbar sind. Eine weitere Aufgabe der Erfindung ist es, einen Weg aufzuzeigen, wie die Konturdaten in Form von Merkmalsvektoren besonders effektiv miteinander verglichen werden können, so dass ein gegenüber dem Stand der Technik verbessertes Verfahren zur Erkennung von Objekten zur Verfügung gestellt werden kann.
  • Diese Aufgaben werden bei einem Verfahren mit den Merkmalen des Patentanspruchs 1 gelöst.
  • Vorteilhafte Ausgestaltungen und Weiterbildungen dieses Verfahrens sind Gegenstand der abhängigen Patentansprüche.
  • Das erfindungsgemäße Verfahren umfasst im ersten Verfahrensschritt die Bildung von Sätzen 1-dimensionaler parametrisierter Daten (Stützpunktvektoren) für miteinander zu vergleichende erste und zweite Objekte. Ziel dabei ist es, ein neues Objekt mit einem einzelnen Objekt aus einer Gruppe von bereits erfassten Objekten zu vergleichen und die Ähnlichkeit des neuen Objekts mit den bereits gespeicherten Objekten zu bewerten. Grundlage der Bewertung ist die Kontur des neuen Objekts, die aus einer Bildsignalinformation gewonnen wird. In der Bildverarbeitung ist die Erkennung von Konturen eines Objekts, d.h. die Bereitstellung der Konturdaten Stand der Technik. Beispielsweise kann ein farbiges Bild in ein Grauwertbild umgewandelt werden. Aus dem Grauwertbild kann z.B. durch Anwendung weiterer Filter Rauschen entfernt werden. Über die Einstellung von Helligkeit und Kontrast ist es möglich, Konturen eines Objektes hervorzuheben. Im Rahmen der Patentanmeldung wird davon ausgegangen, dass diese Kontur grundsätzlich zur Verfügung steht.
  • Diese Kontur wird abgetastet, wobei auf der Kontur eine Kette von n = n0,....,nN–1 aufeinander folgender Stützpunkte erzeugt wird. In einem kartesischen Koordinatensystem besitzt jeder dieser Stützpunkte einen x-Wert und einen y-Wert, die jeweils mit dem Index des Stützpunkts versehen als Stützpunktvektoren X → = (x0,...,xN– 1) und Y → = (y0,...,yN–1) abgespeichert werden. Diese Stützpunktvektoren enthalten jeweils N Komponenten. Wichtig für die Leistungsfähigkeit des erfindungsgemäßen Verfahrens ist die Aufteilung einer 2-D-Kontur in zwei einzelne 1-dimensionale Datensätze, d.h. in zwei Vektoren der Dimension N, die Grundlage der Vergleichsoperation sind. Zweckmäßig ist die Transformation der Stützpunktvektoren in den Frequenzraum, wobei ein Satz von m Basisfunktionen verwendet wird. Dies erfolgt insbesondere durch die Anwendung einer Gabor-Filterung, wobei für jeden angewendeten Gabor-Filter das Resultat in den Ortsraum rücktransformiert wird, um auf diese Weise komplexe Koeffizienten in den Basisfunktionen zu bestimmen, die wiederum in Merkmalsvektoren f →i der Länge m für jeden der Stützpunkte erfasst werden können. Diese Merkmalsvektoren f →i der Dimension 2 × mi enthalten komplexe Koeffizienten für den x-Wert als auch für den y-Wert.
  • Die Berechnung der Ähnlichkeit der Merkmalsvektoren erfolgt unter Berücksichtigung der Phasenähnlichkeit der einzelnen Vektorkomponenten (Koeffizienten) in der komplexen Ebene. Wesentlich ist bei dem erfindungsgemäßen Verfahren ist, dass nicht zuerst für die Ähnlichkeit aller x-Koeffizienten der miteinander zu vergleichenden Merkmalsvektoren und anschließend ein Maß für die Ähnlichkeit aller y-Koeffizienten der miteinander zu vergleichenden Merkmalsvektoren berechnet und anschließend diese Ähnlichkeiten miteinander kombiniert werden, sondern dass für jede Basisfunktion, d.h. für jeden komplexen Koeffizienten des Merkmalsvektors jeweils getrennt nach x- und y-Merkmalen die Ähnlichkeit berechnet wird und anschließend die Ergebnisse multipliziert werden, so dass sich eine hohe Ähnlichkeit nur dann ergibt, wenn sowohl die Ähnlichkeit der jeweiligen komplexwertigen x-Koeffizienten in Verbindung mit der Ähnlichkeit der komplexwertigen y-Koeffizienten hoch ist. Die Berechnung der Ähnlichkeit erfolgt Komponentenweise, wobei im ersten Schritt die jeweiligen x- bzw. y-Koeffizienten der jeweiligen Merkmalsvektoren miteinander kombiniert werden. Als besonders leistungsstark hat es sich heraus gestellt, wenn bei der Berechnung der Ähnlichkeit der Merkmalsvektoren die Phasenähnlichkeit der miteinander zu vergleichenden komplexwertigen Koeffizienten berücksichtigt wird. Die Ähnlichkeit zweier komplexwertiger Koeffizienten wird also dadurch berechnet, dass der Betrag, d.h. die Länge der Vektoren miteinander multipliziert wird, wobei die Phaseninformation als Winkelfunktion, insbesondere als Kosinusfunktion der Phasendifferenz einfließt. Dieses Verfahren hat sich als wesentlich genauer herausgestellt als beispielsweise die Berücksichtigung des absoluten Abstands der Komponenten in der komplexen Zahlenebene. Auf diese Weise wird die Phasenähnlichkeit zwischen allen zu vergleichenden Koeffizienten der Merkmalsvektoren berechnet. Schließlich werden diese Werte für jede Komponente, d.h. für jede Basisfunktion miteinander multipliziert und schließlich aufsummiert, wobei sich ein Maß Ps für Phasenähnlichkeit ergibt. Dieser Wert wird zweckmäßigerweise in Relation zu einem Maximalwert Ms von Ps gesetzt, wobei der Maximalwert Ms dann gegeben ist, wenn die Phasendifferenz Null ist. Entsprechend berechnet sich der Maximalwert als Summe der Produkte der Beträge der einzelnen komplexzahligen Komponenten der Merkmalsvektoren. Durch Division des Wertes für die Phasenähnlichkeit Ps durch den Maximalwert Ms erhält man einen normierten Ähnlichkeitswert Ss im Intervall [–1, 1].
  • Da Ähnlichkeitswerte in Form von Wahrscheinlichkeiten üblicherweise in einem Intervall [0, 1] angegeben werden, kann optional eine zusätzliche Normierung des Ähnlichkeitswerts Ss gemäß der Gleichung in Patentanspruch 2 erfolgen.
  • Die Transformation der jeweiligen Stützpunktvektoren kann grundsätzlich nach unterschiedlichen 1-dimensionalen Basisfunktionen erfolgen, wobei sich durch die Aufspaltung der Stützpunktinformationen in Stützpunktvektoren für die x- Richtung als auch für die y-Richtung 1-dimensionale Gabor-Filter als besonders günstig herausgestellt haben. Gegenüber 2-D-Gabor-Filtern, bei denen eine Sinuswelle mit bestimmten Frequenzen und Richtungen im Gauß-Raum angewendet wird, gelingt es durch Verwendung eines 1-D-Gabor-Filters Konturbereiche besonders gut zu erfassen. Der Grund ist darin zu sehen, dass bei dem erfindungsgemäßen Verfahren Texturinformationen ausgeblendet werden. Durch die Verwendung 1-dimensionaler Datensätze und entsprechend 1-D-Gabor-Filter können die einzelnen Gabor-Koeffizienten für die x- und für die y-Werte der Stützpunkte separat berechnet werden, ohne dass die Textur des Objektes oder des an die Objektkontur angrenzenden Hintergrundes die in die Ähnlichkeitsbetrachtung einfließenden Merkmale, d.h. die komplexen Koeffizienten der Merkmalsvektoren, beeinflussen würde.
  • Die Durchführung der von Transformationen äquivalent zur 1-D-Gabor-Wavelet-Transformation ist im Rahmen der Erfindung Gegenstand des Patentanspruchs 4. Hierzu wird zunächst eine Fourier-Transformation für jeden der Stützpunktvektoren X → und Y → innerhalb der gewählten Grenzen durchgeführt. Die Grenzen der Fouriertransformation sind durch die Anzahl der Stützpunkte auf den zu vergleichenden Konturen vorgegeben. Die 1-D-Gabor-Wavelet-Transformation wird dadurch vollzogen, dass die fouriertransformierten Stützpunkte im Fourierraum mit dem Gabor-Kernel multipliziert werden und das Resultat einer Fourier-Rücktransformation unterzogen wird. Bei dem Gabor-Wavelet handelt es sich um eine ebene Welle mit der Frequenz k, die von einer Gauß-Funktion eingehüllt wird. Bei dem erfindungsgemäßen Verfahren beschreibt der Merkmalsvektor an einem bestimmten Stützpunkt der Kontur die benachbarte Verteilung der x-Werte bzw. y-Werte. Durch eine Mehrzahl von Merkmalsvektoren einer Kontur lässt sich die Kontur in parametrisierter Weise sehr gut beschreiben. Bei dem Gabor-Kernel gemäß Patentanspruch 4 ist m der Index eines jeden Gabor-Levels. Zweckmäßigerweise wird bei rechnergestützten Verfahren eine Maximalfrequenz kmax = 2π/λmin vorgegeben. Die einzelnen Frequenzen liegen in einem Abstand zueinander, der durch den so genannten Größenfaktor f nach der Gleichung km = kmax(1/f)m beschrieben werden kann. Typische Werte für den Größenfaktor f sind 2 für Oktavenintervalle, √2 oder
    Figure 00070001
    um ein sehr dichtes Sampeln im Frequenzraum zu erreichen. Wieviele unterschiedliche Gabor-Levels (mmax +1) verwendet werden sollten wird nach folgender Gleichung berechnet,
    Figure 00070002
    wobei mmax auf den nächstliegende ganze Zahl gerundet wird, und CD eine von einem Anwender vorgebbare Konstante ist. Die Konstante cD wird normalerweise auf den Wert 6 gesetzt, wobei der Abstand von 2·σ links und rechts desjenigen Gabors mit der größten Wellenlänge fast ein Drittel der gesamten Kontur bedeckt. Durch eine höhere Konstante cD kann die Bedeutung bzw. der Einfluss kleinerer Konturdetails erhöht werden. In jedem Fall nimmt die Anzahl der Gabor-Level linear mit dem Logarithmus von N zu.
  • Anschließend erfolgt eine Rücktransformation der Daten in den Ortsraum. Auf diese Weise erhält man sowohl für die x- als auch für die y-Richtung Konturvektoren. Die Konturvektoren besitzen N Komponenten entsprechend der Anzahl der Stützpunkte. Um bei einem Berechnungsverfahren einen Stützpunkt zu identifizieren, erfolgt dies nicht über seine absoluten x- und y-Werte, sondern lediglich über den Index n, d.h. seine Stellung innerhalb der Konturvektoren. Die Komponenten dieser Konturvektoren sind die jeweiligen Merkmalsvektoren der einzelnen Stützpunkte. Die Dimension dieser Merkmalsvektoren beträgt 2 × m entsprechend der Anzahl der x- und y-Koeffizienten.
  • Im Falle von geschlossenen 2-dimensionalen Konturen kann eine rotatorische Invarianz dadurch erzielt werden, dass die fouriertransformierten Stützpunkt vektoren normalisiert werden. Hierzu muss ein Standardverschiebungswinkel gemäß der Gleichung in Patentanspruch 5 berechnet werden. In dieser Gleichung ist ϕi die Phase des i-ten Fourier-Koeffizienten. Durch Rotation der Stützpunktvektoren X → und Y → um den Winkel –p kann die Kontur in eine normalisierte Orientierung gedreht werden. Dies Verfahren kann durch die Verwendung einer Rotationsmatrix Q beschrieben werden, wobei der Winkel p zwischen der Hauptachse der Kontur und der horizontalen Achse gemessen wird. Nach der Fourier-Transformation können X ‿ und Y ‿ unter Verwendung von X →rot und Y →rot berechnet werden.
  • Es kann im Rahmen der Erfindung vorgesehen sein, eine Kontur um einen Vielzahl von Winkeln zu drehen, z.B. in Schritten von 5° bis 10° in einem Bereich von 0° bis 180°. Es ist auch denkbar ein Objekt um mehrere Raumachsen zu rotieren. Auf diese Weise kann von einem Objekt ein Datensatz mehrerer unterschiedlicher Konturen generiert werden, so dass die auf diese Weise gewonnen Konturdaten Grundlage eines späteren Abgleichprozesses sein können.
  • Eine weitere Aufgabe der Erfindung ist es, eine Möglichkeit aufzuzeigen, Merkmalsvektoren unterschiedlicher Länge sinnvoll miteinander zu vergleichen. Der Vergleich von Merkmalsvektoren identischer Länge ist unproblematisch. Die unterschiedliche Länge bedeutet, dass die Anzahl der Gabor-Level, d.h. der Index m für die einzelnen Merkmalsvektoren unterschiedlich ist. Am besten lässt sich die Problematik an einem Beispiel erläutern. Zwei miteinander zu vergleichende Konturen besitzen N1 und N2 Stützpunkte und eine dementsprechende Anzahl von Merkmalsvektoren an den einzelnen Stützpunkten. Um die Ähnlichkeit zweier Stützpunkte an einem Konturindex n1 und n2 zu berechnen, betrachtet man die Merkmalsvektoren f1 und f2. Jeder dieser Merkmalsvektoren besitzt 2 × m1 bzw. 2 × m2 komplexzahlige Koeffizienten entsprechend der Anzahl der Basisfunktionen. Wenn die erste Kontur mit dem Index 1 neun Basisfunktionen und die zweite Kontur mit dem Index 2 sechs Basisfunktionen aufweist, ergeben sich vier unterschiedliche Möglichkeiten, die beiden Merkmalsvektoren miteinander zu vergleichen, d.h. der Merkmalsvektor f2 kann an vier Positionen dem Merkmalsvektor f1 gegenüber gestellt werden. Wenn dann bei der Vergleichsberechnung das Koeffizientenpaar x0, y0 des ersten Merkmalsvektors und x0, y0 des zweiten Merkmalsvektors gegenüber gestellt werden, dann handelt es sich um einen Vergleich auf der Skala s = 0. Wenn zuerst das Koeffizientenpaar x0, y0 des zweiten Merkmalsvektors mit dem Koeffizientenpaar x3, y3 des ersten Merkmalsvektors für die Berechnung der Ähnlichkeit herangezogen wird, dann handelt es sich um einen Vergleich auf der Skala 3. Die weiteren möglichen Positionen sind Vergleiche auf den Skalen 1 und 2.
  • Im Rahmen der Erfindung ist es vorgesehen, einen Iterationsprozess auf allen möglichen Skalen durchzuführen, wobei die Ähnlichkeit einer Gruppe von Merkmalsvektoren einer neuen Kontur auf einer festgelegten Skala zu einer bereits bekannten Kontur bestimmt wird und das Verfahren für alle möglichen Skalen wiederholt wird, wobei anschließend eine Entscheidung erfolgt, bei welcher Skala die größte Übereinstimmung zwischen den Merkmalsvektoren gegeben ist.
  • Im Rahmen der Erfindung ist es zur Berechnung der Ähnlichkeit von zwei Merkmalsvektoren auf einer Skala s vorgesehen, zuerst die maximale Anzahl der zur Verfügung stehenden Vergleichslevel zu berechnen. Hierzu wird der Minimalwert der Indizes der miteinander zu vergleichenden Vektoren berechnet: mmin = min(mmax 1, mmax 2). Für jedes Level, d.h. für jeden Index m wird nun ein nicht normalisierter Ähnlichkeitswert Ss für die x- und die y-Koeffizienten des Merkmalsvektors berechnet. Wie bei dieser Berechnung die Phasendifferenz der komplexwertigen Koeffizienten einfließt und welche optionalen Möglichkeiten zur Normalisierung des Ähnlichkeitswerts möglich sind wurden bereits erläutert (vgl. Patentanspruch 1 und 2).
  • Im Rahmen des erfindungsgemäßen Verfahrens wird es als vorteilhaft angesehen, wenn die Sätze 1-dimensionaler parametrisierter Daten, d.h. die Stütz punktvektoren für die x- und die y-Richtung Stützpunkte einer die Kontur möglichst gut beschreibenden Funktion sind. Das heißt, dass die diskreten Konturpunkte durch äquidistant verteilte Stützpunkte eines interpolierten Funktionsgraphen ersetzt sind.
  • Im Rahmen der Erfindung kann ein im Gegenuhrzeigersinn orientierter geschlossener Graph sequentiell in eine Kette von benachbarten Knoten unterteilt werden, wobei jeder Knotenpunkt einem Pixel entspricht. Die Position eines solchen Pixels wird in einem kartesischen Koordinatensystem beschrieben. Um die diskreten Konturpunkte zu beschreiben, ist ein Interpolationsverfahren erforderlich, um die Kette von Pixel-Koordinaten in Funktionen sowohl für die x-Koordinate als auch für die y-Koordinate umzuwandeln. Die Länge des Graphs berechnet sich aus der Summe der Abstände zwischen aufeinander folgenden Pixeln und wird dabei als Abszisse für die Parametrisierung verwendet. Das gewählte Interpolationsverfahren ist grundsätzlich beliebig und dient lediglich zur Vereinfachung der anschließenden Transformation der Stützpunktvektoren aus dem Ortsraum in den Frequenzraum. Im Rahmen der Erfindung wurde beispielsweise der B-Spline-Algorithmus verwendet. Hierbei handelt es sich um eine parametrisierte kubische Kurve, die durch Basisfunktionen darstellbar ist. Der Algorithmus arbeitet heuristisch, um automatisch eine ausreichende Anzahl von Knotenpunkten zu finden, um den B-Spline zu beschreiben. Da der maximale Abstand zweier benachbarter Pixel einer dicht abgetasteten Kontur √2 beträgt und bei einer Vorgabe, dass ein einzelnes Knotenpunktintervall maximal die Länge 2 × √2 besitzt, ergeben sich N–1 Knotenpunktintervalle entsprechend N Knotenpunkten. Die Anzahl der Interpolationspunkte kann variieren. Welche Knotenpunkte als Stützpunkte tatsächlich zur Bewertung der Ähnlichkeit der Konturen herangezogen werden sollen, kann durch den Anwender des Verfahrens gesteuert werden. Zweckmäßigerweise sind die einzelnen Stützpunkte äquidistant auf den jeweiligen B-Spline angeordnet. Im Rahmen der Erfindung wird unter dem Begriff "Stützpunkt" einer Kontur sowohl der diskrete Konturpunkt innerhalb einer aufeinander folgenden Kette von Konturpunkten verstanden, als auch ein Interpolationspunkt eines B-Splines, der die diskrete Kette von Konturpunkten beschreibt.
  • Bei dem erfindungsgemäßen Verfahren werden alle Punkte einer Kontur oder einer die Kontur beschreibenden Funktion mit Hilfe eines Indizierungsvorgangs in eine sequentielle Reihenfolge gebracht, wobei der Index, beginnend bei 0, einen bestimmten Stützpunkt der Kontur bezeichnet. Um auf einen bestimmten Merkmalsvektor eines Stützpunktes zuzugreifen, erfolgt die Identifizierung über den entsprechenden Index dieses Stützpunktes. Um Ähnlichkeiten zwischen einem Merkmalsvektor eines bestimmten Konturpunktes mit Merkmalsvektoren einer anderen Kontur zu berechnen, ist es daher erforderlich, auf der neuen Kontur einen Indexbereich festzulegen, um die einzelnen Merkmalsvektoren bzw. Stützpunkte der Kontur zu identifizieren. Der Indexbereich repräsentiert einen Abschnitt der Kontur. Ein Abgleich erfolgt lediglich innerhalb des ausgewählten Indexbereiches. Die Alternative, nämlich jeden einzelnen Merkmalsvektor mit allen Merkmalsvektoren der anderen Kontur zu vergleichen, erfordert einen erheblichen Rechenaufwand und ist nicht effektiv. Anstelle dessen wird ein begrenzter Indexbereich einer bereits gespeicherten Kontur (Galerie-Kontur) ausgewählt. Durch die Verwendung eines Indexbereichs ist es möglich, das erfindungsgemäße Verfahren sehr flexibel auf unterschiedlichste Konturen anzuwenden, wobei bei diesem Verfahren die Bestimmung von Ähnlichkeiten zweier Konturen allein anhand signifikanter Teilkonturen möglich ist.
  • Das erfindungsgemäße Verfahren ermöglicht eine translations- und skalierungsinvariante, d.h. mit der menschlichen Wahrnehmung vergleichbare Erkennung von partiell vorhandenen Konturen, selbst wenn diese bis zu einem bestimmten Grad durch zusätzliche Informationen bzw. Störungen überlagert sind. Bestehende Verfahren, die in der Lage sind, starre komplette Konturen unter verschiedenen Invarianzbedingungen wieder zu erkennen, haben Probleme, falls Teile der Kontur verdeckt sind oder von einem anderen Objekt überlagert sind. Umgekehrt können bei Verfahren, die Teilkonturen erkennen, nur schwer Normalisierungen erfolgen, da diese ja von Konturteilen maßgeblich abhängen können, die gar nicht bekannt sind. Insbesondere bei artikulierten Objekten, wie im Fall von "Quasi-Stabilen-Konturen" z.B. Menschen, bei denen die einzelnen Körperteile unterschiedliche Relativlagen einnehmen können, kann es schwierig sein, zu versuchen, dieses Objekt "Mensch" mit Hilfe seiner Gesamtkontur wieder zu erkennen, da es zu viele Kombinationen einzelner Stellungen von Körperteilen gibt. Durch die Erkennung von Teilkonturen, insbesondere von Konturen einzelner Körperteile kann dieses Problem mit dem erfindungsgemäßen Verfahren gelöst werden. Eine wesentliche Aufgabe der Erfindung ist daher, ein verbessertes Verfahren zur Konturerkennung aufzuzeigen.
  • Herkömmliche Komplett-Kontur-Erkennungsverfahren versagen weiterhin, falls die Daten der Kontur unvollständig sind, z.B. nur ein halber Mensch oder nur ein halbes Auto zu sehen ist. Des Weiteren versagen bekannte Verfahren auch dann, wenn sich zwei Objekte überlagern, wenn z.B. noch ein Mensch, noch ein Fisch, etc. einen anderen überdeckt. So lange allerdings noch signifikante Teilkonturen vorhanden sind, kann das erfindungsgemäße Verfahren das teilverdeckte Objekt identifizieren bzw. verschiedene Objekte voneinander unterscheiden. Mit einer Datenbank aus Konturen von bestimmten Profilen, wie z.B. Gesichtskonturen kann das Verfahren die einzelnen Gesichtskonturen und damit die Gesichter einzelner Menschen anhand der Konturen identifizieren. Das Verfahren leistet insbesondere eine Klassifizierung von Objekten anhand der Auswertung von Teilkonturen als ähnlich, genau so wie ein Mensch Objekte anhand ihrer Teilkonturen erkennt und ebenfalls als ähnlich klassifizieren würde. Insbesondere ist das erfindungsgemäße Verfahren auf beliebig konturierte Objekte anwendbar und nicht ausschließlich auf einen bestimmten Objekttyp, wie beispielsweise auf das Profil eines Gesichts beschränkt.
  • Ein wichtiges Merkmal des erfindungsgemäßen Verfahrens ist die Topologieerhaltung der miteinander zu vergleichenden Konturen. Topologieerhaltung bedeutet im Rahmen der Erfindung, dass eine neue Kontur mit einer Galerie-Kontur verglichen werden kann, wobei die relative Länge, entsprechend der Anzahl der Stützpunkte, der jeweils miteinander zu vergleichenden Konturen, auch im Ergebnis erhalten bleibt. Es ist vorgesehen, die Proportionalität der Konturen bei der Berechnung der Ähnlichkeiten dadurch zu berücksichtigen, dass ein Merkmalsvektor der einen Kontur mit einer größeren Anzahl von Merkmalsvektoren in einem bestimmten Bereich der anderen Kontur verglichen wird. Die unterschiedliche Länge der Konturen bzw. die unterschiedliche Anzahl der Stützpunkte wird durch die Skala der Merkmalsvektoren deutlich. Die Skalendifferenz ist umso größer, je größer der Längenunterschied der miteinander zu vergleichenden Konturen oder Konturabschnitte ist. Die Skala ergibt sich aus der Gesamtkonturlänge der miteinander zu vergleichenden Konturen sowie der Anzahl der Gabor-Levels. Anschaulich kann man sich vorstellen, dass bei einem beispielhaft gewählten Größenfaktor von 1,4142 mit der nächstkleineren Frequenz eine Verbreiterung der Gabor-Funktion um diesen Faktor einhergeht, so dass eine um 41,42% längere Kontur erfasst werden kann. Vergleicht man diese beiden Konturen miteinander, würde der zusätzliche Größenfaktor zu einem weiteren Gabor-Level und damit zu einer Skala s = 1 führen. Je größer die Längenunterschiede der miteinander zu vergleichenden Konturen oder Konturabschnitte, desto größer ist grundsätzlich auch die maximale Skalendifferenz der Merkmalsvektoren. Große Skalendifferenzen bedeuten allerdings einen erhöhten Rechenaufwand, so dass grundsätzlich ein Abgleich auf der Skala 0 angestrebt wird. Insbesondere kann bei dem erfindungsgemäßen Verfahren von vornherein die gewünschte Skala festgelegt werden, auf welcher ein Abgleich erfolgen soll. Insbesondere wenn es sich um gleich lange oder im Wesentlichen gleich lange Konturen handelt, ist ein Abgleich auf der Skala 0 zu empfehlen, da mit dem erfindungsgemäßen Verfahren bereits bei einer Skala 0 sehr gute Ähnlichkeitswerte berechenbar sind.
  • Nachfolgend wird das erfindungsgemäße Verfahren an einem Beispiel erläutert. Es sollen zwei Konturen miteinander verglichen werden. Die eine Kontur ist die so genannte Galerie-Kontur, die in einem Datenspeicher abgelegt ist. Die Galerie-Kontur weist nG äquidistant verteilte Stützpunkte auf. nC ist die Anzahl der Stützpunkte der neuen Kontur, die mit der Galerie-Kontur verglichen werden soll. Die Indizes der Stützpunkte der neuen Kontur können in Rs Regionen mit der Größe nI = nC/R aufgeteilt werden, wobei alle Regionen gleich groß sind. Mit dr (nI) wird der Mittelpunkt der jeweiligen Region beschrieben. Ziel ist es nun, einen Bereich von Indizes der Galerie-Kontur zu finden, mit welcher der ausgewählte Merkmalsvektor der neuen Kontur verglichen werden soll. Die Breite eines Bereichs bzw. der Abstand zwischen den Mittelpunkten zweier Bereiche wird als Δdr bezeichnet. Für die Bestimmung der Lage eines Bereichs wird zunächst ein Basisindex cMdr eines Bereichs Rs gemäß den Gleichungen in Patentanspruch 6 berechnet. Die Berechnung der Bereichsgrenzen erfolgt unter Verwendung des Größenfaktors f, wobei die Bereichsgrenzen in Abhängigkeit von der Skalendifferenz der miteinander zu vergleichenden Konturen gewählt werden. Die entsprechenden Gleichungen finden sich in Patentanspruch 6. Je nachdem, ob die Galerie-Kontur oder die neue Kontur mehr Stützpunkte aufweist, ergeben sich eine erste und eine zweite Gleichung für die Berechnung des Basisindex cM sowie für die Faktoren pnear und pfar. In diesen Gleichungen ist cC ein durch einen Benutzer festsetzbarer Sicherheitsfaktor, der einen Toleranzbereich eines Bereichs definieren kann. c0 ist ein zusätzlicher konstanter Korrekturfaktor. Aus den Gleichungen geht hervor, dass mit zunehmender Skala die Bereichsgrenzen um einen bestimmten Faktor kleiner werden, so dass bei einem Abgleich auf unterschiedlichen Skalen jeweils unterschiedliche Bereiche für jede Skala berechnet werden.
  • Wesentlich bei dem erfindungsgemäßen Verfahren ist, dass die Indizes dr(nI) nicht nur für einen Grobabgleich, sondern auch für den kompletten Konturabgleich verwendet werden. Die berechneten Indizes dienen gleichzeitig als Grundlage für den Offset, das heißt für die Indexverschiebung des Index 0, der wiederum gleichzusetzen ist mit dem Startpunkt der Kontur.
  • Beim Abgleich von Konturen ist grundsätzlich vorgesehen, dass in einem ersten Schritt ein Grobabgleich und in einem sich anschließenden zweiten Schritt ein Feinabgleich durchgeführt wird. Durch den Grobabgleich soll festgestellt werden, in welchem Bereich voraussichtlich die größten Übereinstimmungen der Merkmalsvektoren festzustellen sind. Diese gestaffelte Vorgehensweise ist wesentlich effektiver als jeden Merkmalsvektor der einen Kontur mit jedem Merkmalsvektor der anderen Kontur unmittelbar zu vergleichen. Bei dem Grobabgleich wird im Anschluss an die Bereichsbildung, wie sie in den Schritten a) bis c) des Patentanspruchs 6 beschrieben ist, für jeden Merkmalsvektor jedes i-ten Stützpunkts aus dem gewählten Bereich der zweiten Kontur ein Ähnlichkeitswert mit dem Merkmalsvektor am ausgewählten Stützpunkt dr der ersten Kontur berechnet. Die Berechnung des Ähnlichkeitswerts erfolgt gemäß den Gleichungen in den Patentansprüchen 1 oder 2. Der höchste sich in einem Bereich ergebende Ähnlichkeitswert wird ausgewählt und zwischengespeichert. Der Grobabgleich besteht darin, dass nicht jeder Stützpunkt des Bereichs zur Berechnung eines Ähnlichkeitswerts herangezogen wird, sondern eine Anzahl, die kleiner ist als die Gesamtzahl der Stützpunkte in dem Bereich. Für alle Stützpunkte dr werden entsprechende Bereiche und höchste Ähnlichkeitswerte berechnet und abschließend wird der arithmetische Mittelwert aus den jeweils höchsten Ähnlichkeitswerten der einzelnen Bereiche berechnet. Dieser Mittelwert ist ein Maß für die Ähnlichkeit der beiden Konturen, allerdings in Abhängigkeit von der gewählten Bereichsbildung und Anordnung. Dieser Ähnlichkeitswert ist somit abhängig von der Wahl der Startindizes der jeweiligen Konturen. Um einen Ähnlichkeitswert unabhängig von dem willkürlich festgesetzten Startindex zu erhalten, ist im Rahmen des Patentanspruchs 7 vorgesehen, dass die berechneten Bereiche um einen wählbaren Offset O verschoben werden. Die Lage des Offsets wird durch eine Indexverschiebung bestimmt. Es ergeben sich abhängig von dem gewählten Offset unterschiedliche Ähnlichkeitswerte, wobei aus allen errechneten Ähnlichkeitswerten der höchste Ähnlichkeitswert ausgewählt wird. Auf diese Weise wird ein finales Offset OFinal für finale Suchbereiche definiert, in denen der Feinabgleich erfolgt. Im Unterschied zum Grobabgleich wird bei einem topologieerhaltenden Feinabgleich jeder Stützpunkt aus den entsprechenden Bereichen zur Berechnung des Ähnlichkeitswerts herangezogen und auf dieser Basis die Gesamtähnlichkeit berechnet. Die verschiedenen Offsets OFinal werden mit einem Inkrement inc > 1 gestestet. Wenn ein finales Offset OFinal gefunden wurde wird inc = 1 gesetzt und noch mal verglichen.
  • Im Rahmen des Patentanspruchs 8 ist vorgesehen, dass der Feinabgleich für jede sinnvolle Skala durchgeführt wird und nicht ausschließlich auf der Skala Null erfolgt, wenn die Skalendifferenz größer als Null ist. Der skalenabhängig höchste Ähnlichkeitswert wird zur Angabe der Gesamtähnlichkeit herangezogen.
  • Im Rahmen des Patentanspruchs 9 wird eine Ähnlichkeit zwischen zwei Konturen bei Überschreiten eines vorgebbaren Schwellenwerts dann bejaht, wenn ein vorgebbarer prozentualer Anteil von einander benachbarten Merkmalsvektoren der einen Kontur einen hinreichenden Ähnlichkeitswert mit einander benachbarten Merkmalsvektoren der anderen Kontur aufweist. Dieses Verfahren wird im Rahmen der Erfindung als Percent-matching bezeichnet. Beim Percent-matching geht man davon aus, dass eine Ähnlichkeit angenommen werden kann, wenn eine bestimmte Anzahl von benachbarten zueinander im Abstand angeordneten Merkmalsvektoren mit Merkmalsvektoren einer anderen Kontur mit hinreichender Wahrscheinlichkeit korrespondieren. Bei einer kompletten Konturerkennung mit gleichmäßig beabstandeten Merkmalsvektoren entspricht der prozentuale Anteil der Kontur dem prozentualen Anteil der Merkmalsvektoren der Kontur. Wenn die Merkmalsvektoren hingegen nicht gleichmäßig beabstandet sind, kommt es ausschließlich auf den prozentualen Anteil der Merkmalsvektoren an, die in diesem Fall nicht mit einem prozentualen Anteil der Konturlänge deckungsgleich sein müssen.
  • Das Percent-matching bietet sich beispielsweise an, wenn zwei Objekte überlagert sind und nur das teilweise sichtbare Objekt analysiert werden soll. Von dem Gesamtobjekt ist nur ein Teil der Gesamtkontur erkennbar, der als prozentualer Anteil ausgedrückt werden kann. Es ist möglich, dass der prozentuale Anteil der Gesamtkontur signifikante Merkmale aufweist, so dass eine Identifizierung der Gesamtkontur anhand dieser signifikanten Konturmerkmale möglich ist. Es kann nun durch Benutzervorgabe festgelegt werden, dass die Ähnlichkeit mit einer Galerie-Kontur bejaht wird, wenn ein bestimmter prozentualer Anteil der Konturlänge der neuen Kontur mit einem entsprechenden prozentualen Anteil der Galerie-Kontur übereinstimmt. Auf diese Weise kann eine bestimmte Wahrscheinlichkeit angegeben werden, dass die neue Kontur der in der Galerie-Kontur gespeicherten Gesamtkontur entspricht, obwohl die neue Kontur teilweise verdeckt ist. Versuche haben gezeigt, dass die Erfolgsquoten bei diesem Verfahren bei über 80 % liegen.
  • Mit dem erfindungsgemäßen Verfahren ist es möglich, Konturen aufgrund vorgebbarer Ähnlichkeitskriterien zu gruppieren.
  • Eine andere Vorgehensweise ist es, bestimmte Konturabschnitte vorzugeben, sei es durch diskrete Auswahl der Abschnittsgrenzen, durch die Angabe der Abschnittsbreite und Festlegung eines Startpunkts, wie z.B. des Mittelpunkts eines Abschnitts oder einer Abschnittsober- bzw. -untergrenze mit zusätzlicher Richtungsangabe. Im Unterschied zum Percent-matching, bei welchem automatisch derjenige Bereich herausgesucht wird, in dem sich die größten Übereinstimmungen herausstellen, wird bei der diskreten Eingabe eines Konturabschnitts ausschließlich in diesem Bereich das erfindungsgemäße Verfahren zu Bewertung von Merkmalsvektoren angewendet (Patentansprüche 9 bis 12).
  • Die technische Verwendung dieses Verfahrens ist z.B. im Bereich eines Erkennungssystems für auf einem Transportmittel an einer Kamera vorbeigeführten Objekten zu sehen, deren Konturen zumindest teilweise sichtbar sind und bei welchem anhand der Gesamtkontur oder Teilkontur eine Objektidentifizierung mit einer gewissen Wahrscheinlichkeit möglich ist. Eine Weiterbildung eines solchen Erkennungssystems ist darin zu sehen, dass anhand der identifizierten Teilkontur auf die räumliche Lage des Gesamtobjekts geschlossen werden kann, bzw. Informationen für ein nachfolgendes Bearbeitungssystem, wie z.B. ein Mittel zu Handhabung des Objekts zur Verfügung gestellt werden können. Grundsätzlich kann die Kamera auch relativ zu einem zu erfassenden Objekt bewegt werden, wie z.B. bei einem digitalen Erkennungssystem zur Auswertung von Luftbildinformationen, insbesondere im Rahmen einer Steuerung eines Flugobjekts, das entsprechende technische Mittel zur Erfassung von Luftbildern und Mittel zur technischen Durchführung des erfindungsgemäßen Verfahrens beinhaltet, wobei die Ergebnisse der Objekterkennung in die Berechnung der Flugverlaufs, d.h. die Steuerung des Flugobjekts einfließen. Umgekehrt kann die technische Verwendung des erfindungsgemäßen Verfahrens auch in einer Auswertung von Bildinformationen von Flugobjekten zu sehen sind, die von einer stationären Kamera erfasst worden sind, und mit verbesserter Trefferwahrscheinlichkeit mit Referenzbildern einer Datenbank rechnergestützt abgleichbar sind, um in Abhängigkeit von der Ähnlichkeit in möglichst kurzer Zeit Informationen für einen insbesondere militärischen ggf. technisch automatisierten Entscheidungsprozess bereitzustellen.
  • Ein weiterer Anwendungsbereich des erfindungsgemäßen Verfahrens ist in der Extraktion von biologischen Strukturen anhand ihrer Konturen zu sehen, wie z.B. bei der Auswertung von Bildern, insbesondere von Schnittbildern, hinsichtlich ggf. enthaltener Anomalitäten, wie z.B. Tumore, Einschlüsse etc.
  • Anhand der nachfolgenden Beispiele werden beispielhaft weitere mögliche Anwendungsfälle des erfindungsgemäßen Verfahrens erläutert.
  • 1 zeigt eine rotierte und skalierte Silhouette eines Meerestiers. Mit dem erfindungsgemäßen Verfahren soll festgestellt werden, ob eine Ähnlichkeit zu einer bereits gespeicherten Galerie-Kontur besteht. Bei diesem Beispiel werden die kompletten Konturen miteinander verglichen. Die Anzahl der Interpolationspunkte, d.h. die Anzahl der Merkmalsvektoren wurde auf den benutzerdefinierten Wert 1.536 gesetzt. Des Weiteren wurde eine Konstante von 25 vorgegeben. Teilt man die Anzahl der Interpolationspunkte durch 25, erhält man die Anzahl der Merkmalsvektorpositionen, die bei einem Grobabgleich miteinander verglichen werden sollen. Das Vergleichsverfahren selbst wurde auf der Skala 0 durchgeführt. Die Parameter der Gabor-Transformation sind σ = 3,1414 und f = 1,414, wobei f der Größenfaktor zwischen zwei Gabor-Levels in der Gabor-Transformation ist. Bei diesem Versuch wurden 100 Silhouetten von Meerestieren rotiert und skaliert und mit 1.100 in einer Datenbank gespeicherten Silhouetten verglichen. Es hat sich gezeigt, dass die Erkennungsrate bei 99% liegt. 2 zeigt Punkt-zu-Punkt-Verbindungen zwischen den zu vergleichenden Silhouetten. Die Verbindungslinien verbinden diejenigen Punkte, bei denen die besten Abgleichergebnisse ermittelt werden konnten.
  • Im zweiten Ausführungsbeispiel (3 und 4) gilt es, ein Profil eines menschlichen Gesichts zu erkennen. Hierbei wird ein bestimmter Teilbereich der Kontur herangezogen und mit einer neuen Kontur verglichen. 4 zeigt, dass das rechte Profil insgesamt größer ist d.h., dass der interessierende Bereich der Gesichtskontur insgesamt länger ist. Um die Konturen zu vergleichen, wurde ein signifikanter Konturabschnitt dadurch selektiert, dass ein Pixel ausgewählt wurde und derjenige Punkt der Kontur, der diesem Pixel am nächsten liegt, als Startpunkt bzw. Basismerkmalsvektor dient. Es handelt sich um den Basisindex. Zehn zusätzliche Merkmalsvektoren, d.h. fünf zur linken Seite und fünf zur rechten Seite des Basisindexes werden in diesem Fall für das Abgleichverfahren verwendet. Der Abstand vom Basisindex ist durch eine benutzergegebene Konstante (in diesem Fall 50) definiert, so dass nur eine reduzierte Anzahl von Merkmalsvektoren in die Vergleichsbetrachtung einfließt. Der Abgleichalgorithmus selbst wurde auf allen möglichen Skalen durchgeführt, da in diesem Ausführungsbeispiel eine unterschiedliche Konturlänge vorhanden war. Die Parameter der Gabor-Transformation waren σ = 3,1414 und f = 1,414. Grundsätzlich ist die Länge der Konturen nicht so stark unterschiedlich, dass ein Abgleich auf allen möglichen Skalen erforderlich ist. Vielmehr wäre auch ein Abgleich auf den Skalen 0 und 1 ausreichend gewesen. Grundsätzlich ist im Rahmen des erfindungsgemäßen Verfahrens jedoch vorgesehen, bei Konturen unterschiedlicher Länge einen Abgleich auf allen relevanten Skalen durchzuführen.
  • Ein weiteres Beispiel zur Auswahl eines diskreten zu untersuchenden Konturabschnitts zeigen die 5 und 6. Hierbei soll eine neue Handgeste, wie sie in 5 gezeigt ist, mit einer bekannten, d.h. bereits gespeicherten Handgeste verglichen werden. Auch in diesem Fall wurde ein Pixel in der Nähe der zu untersuchenden Kontur ausgewählt, wobei der nächstliegende Konturpunkt als Basisindex dient. Beiderseits um diesen Basisindex herum wurden insgesamt zehn zusätzliche Merkmalsvektoren, d.h. fünf zur linken und fünf zur rechten Seite für das Abgleichsverfahren ausgewählt. Der Abstand der Merkmalsvektoren ergibt sich durch eine benutzergegebene Konstante. Auch in diesem Beispiel wurden Abgleiche auf allen möglichen Skalen durchgeführt, da die Größe der Konturen wiederum unterschiedlich war.

Claims (12)

  1. Verfahren zur Bewertung der Ähnlichkeit realer Objekte, anhand der Bewertung von Ähnlichkeiten von Merkmalsvektoren, insbesondere für eine 2-D-Konturerkennung und -bewertung, mit folgenden Schritten: a) Bilden von Sätzen von Stützpunktvektoren, welche parametrisierte Daten für miteinander zu vergleichende erste Objekte (Index 1) und zweite Objekte (Index 2) enthalten, wobei i) auf einer aus einer Bildsignalinformation gewonnenen Kontur der zu vergleichenden Objekte jeweils eine Kette von n = n0...nN–1 aufeinander folgenden Stützpunkten erzeugt wird; ii) aus Koordinaten der Stützpunkte für jede der Konturen Stützpunktvektoren X → = (x0,...,xN–1) und Y → = (y0,...,yN–1) gebildet werden; b) Transformation der jeweiligen Stützpunktvektoren X →1, X →2 und Y →1, Y →2 nach einem Satz von m 1 / max+1, und m 2 / max+1, Basisfunktionen, zur Bestimmung von komplexen Koeffizienten (x 1,2 / 0,...,x 1,2 / max), (y 1,2 / 0...,y 1,2 / max) der Basisfunktionen, wobei diese komplexen Koeffizienten gruppiert werden zu Komponenten von Merkmalsvektoren
    Figure 00210001
    mit m1, m2 als Index der jeweiligen Basisfunktion, wobei gilt:
    Figure 00220001
    c) Bestimmung der Ähnlichkeit der Merkmalsvektoren f →1, f →2 nach folgenden Gleichungen: i) Bestimmung von:
    Figure 00220002
    wobei s in einem Bereich von 0 ≤ s ≤ |m 1 / max – m 2 / max| wählbar ist und wobei ϕ als Phase einer komplexen Zahl definiert ist und die Phasendifferenz zweier Koeffizienten gemäß der Gleichungen
    Figure 00220003
    berechnet wird; ii) Bestimmung des Maximalwerts für Ps nach der Gleichung
    Figure 00220004
    iii) Ermittlung der Ähnlichkeitswerts Ss nach der Gleichung
    Figure 00220005
    d) Wiederholung von Schritt c) für auswählbare Stützpunkte der Konturen und e) Bewertung der Ähnlichkeit der Konturen nach einem auswählbaren Schwellenwert.
  2. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass vor der Bewertung des Ähnlichkeitswerts Ss eine Normierung erfolgt, gemäß der Gleichung
    Figure 00230001
  3. Verfahren nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass die Stützpunktvektoren vor der Transformation nach einem Satz von Basisfunktionen in kontinuierliche Funktionen mittels eines Interpolationsverfahrens umgewandelt werden und anschließend nach einem Satz von Basisfunktionen transformiert werden.
  4. Verfahren nach einem der Ansprüche 1 bis 3, dadurch gekennzeichnet, dass die Transformation nach einem Satz von Basisfunktionen folgende Schritte umfasst: a) Durchführen einer Fourier-Transformation für jeden der Stützpunktvektoren X →, Y → und C → = X → + iY →; b) Multiplikation der fouriertransformierten 1D-Stützpunktvektoren mit fouriertransformierten 1D-Gaborfunktionen, wobei der Gabor-Kemel im Fourierraum nach folgender Gleichung berechnet wird:
    Figure 00240001
    mit σ Faktor der Gaußkurve f Gaborfaktor zwischen zwei benachbarten Gaborlevels km = kmax(1/f)m Frequenz eines Gaborlevels kmax = 2π/λmin als Frequenz des Gaborlevels Null m Index der Gaborlevels und anschließend eine Rücktransformation in den Ortsraum erfolgt, gemäß der Formel
    Figure 00240002
    für jeden der Vektoren X → und gemäß der Formel
    Figure 00240003
    für jeden der Vektoren Y →.
  5. Verfahren nach einem der Ansprüche 1 bis 4, dadurch gekennzeichnet, dass bei einer geschlossenen 2D-Kontur eine Normalisierung zur Erreichung rotatorischer Invarianz durchgeführt wird, wobei ein Standard-Verschiebungswinkel mittels der Fourier-Transformierten Werte von C ‿ gemäß der Gleichung
    Figure 00250001
    mod 2π berechnet wird mit ϕi ∊ [0,2π) als Phase des i-ten Fourier-Koeffizienten und anschließend die Vektoren X → und Y → um den Winkel –p unter Verwendung einer Rotationsmatrix Q mit
    Figure 00250002
    in eine normalisierte Richtung gedreht werden, worauf die Fourier-Transformierten X ‿ und Y ‿ unter Verwendung von X →rot und Y →rot berechnet werden.
  6. Verfahren nach einem der Ansprüche 1 bis 5, dadurch gekennzeichnet, dass die Berechnung von Ähnlichkeitswerten auf Bereiche von Merkmalsvektoren erweitert wird und ein skaleninvarianter Vergleich der Merkmalsvektoren mit folgenden Schritten durchgeführt wird: a) es wird aus der Gesamtzahl nC von Stützpunkten einer ersten Kontur eine kleinere Anzahl von benachbarten beabstandeten Stützpunkten dr, mit dem jeweiligen Merkmalsvektor f →r gewählt, wobei r ∊ {1,...R} frei wählbar ist; b) ein Basis-Index cMdr eines einen Konturabschnitt auf der zweiten Kontur repräsentierenden Bereichs Rs(O,dr) mit den Bereichsgrenzen [I low / s + O,I up / s + O] wird unter Verwendung des Größenfaktors f bestimmt mit
    Figure 00260001
    wobei nG die Gesamtzahl der Stützpunkte der zweiten Kontur ist und wobei O ein wählbarer Offset ist; c) die untere Bereichsgrenze I low / s und die obere Bereichsgrenze I up / s wird unter Verwendung der Faktoren pnear und pfar und unter Verwendung des Abstands zweier Stützpunkte Δdr = dr+1 – dr nach folgenden Gleichungen berechnet:
    Figure 00260002
    mit C0 und cC als variierbare Korrekturfaktoren, die während eines Abgleichvorgangs konstant gehalten werden; d) für einen der Merkmalsvektoren
    Figure 00260003
    jedes ni-ten Stützpunktes n 1 / i = dr der ersten Kontur und jedem inc-ten Merkmalsvektor
    Figure 00260004
    aus dem Bereich Rs(O,dr) der zweiten Kontur erfolgt eine Berechnung des Ähnlichkeitswerts
    Figure 00260005
    wobei der höchste Ähnlichkeitswert S max / s(O,dr) ausgewählt wird; e) Wiederholung von Schritte b) bis d) für jeden der Stützpunkte dr der ersten Kontur, wobei entsprechende Basisindizes cMdr Bereiche Rs(O,dr) und jeweils höchste Ähnlichkeitswerte S max / s(O,dr) für jeden der Bereiche Rs(O,dr) bestimmt werden; f) Berechnung eines Mittelwertes S max / s(O) aus den jeweils höchsten Ähnlichkeitswerten S max / s(O, dr).
  7. Verfahren nach Anspruch 6, gekennzeichnet durch folgende Schritte: a) die berechneten Bereiche Rs(O,dr) werden um einen wählbaren Offset O verschoben; b) für diese verschobenen Bereiche Rs(O,dr) werden die Schritte d) bis f) des Patentanspruchs 6 wiederholt; c) die Schritte a) und b) werden für verschiedene Offsets O wiederholt; d) dasjenige Offset OFinal(S max / s) mit dem höchsten mittleren Ähnlichkeitswert S max / s(O) wird zur Bestimmung von finalen Suchbereichen R Final / s(O,dr) gemäß Patentanspruch 6 ausgewählt; e) für den Merkmalsvektor
    Figure 00270001
    jedes Stützpunkts aus den finalen Suchbereichen R Final / s(OFinal,dr) erfolgt eine Berechnung des Ähnlichkeitswerts
    Figure 00270002
    mit dem Merkmalsvektor
    Figure 00270003
    , am Stützpunkt dr der ersten Kontur, wobei der höchste Ähnlichkeitswert S max / s(R Final / s) ausgewählt wird; f) Berechnung des Mittelwerts S Final / s(OFinal) aus den höchsten Ähnlichkeitswerten S max / s(R Final / s) als Gesamtähnlichkeitswert Ss(Kontur1, Kontur2) zwischen den zu vergleichenden Konturen.
  8. Verfahren nach Anspruch 7, dadurch gekennzeichnet, dass die Berechnung des Ähnlichkeitswerts S s(OFinal) für jede Skala s in einem Bereich von 0 ≤ s ≤ |m 1 / max – m 2 / max| durchgeführt wird und aus den errechneten Ähnlichkeitswerten der höchste Ähnlichkeitswert ausgewählt wird.
  9. Verfahren nach einem der Ansprüche 1 bis 8, dadurch gekennzeichnet, dass eine Ähnlichkeit zwischen zwei Konturen bejaht wird, wenn ein vorgebbarer prozentualer Anteil von einander benachbarten Merkmalsvektoren der einen Kontur einen hinreichenden Ähnlichkeitswert mit einander benachbarten Merkmalsvektoren der anderen Kontur aufweisen.
  10. Verfahren nach einem der Ansprüche 1 bis 8, dadurch gekennzeichnet, dass eine Ähnlichkeit zwischen zwei Konturen bejaht wird, wenn Merkmalsvektoren von einem Anwender auf einer ersten Kontur selektierten aufeinander beabstandet folgenden Stützpunkten einen hinreichenden Ähnlichkeitswert mit Merkmalsvektoren von aufeinander beabstandet folgenden Stützpunkten der anderen Kontur aufweisen.
  11. Verfahren nach Anspruch 10, dadurch gekennzeichnet, dass die selektierten Stützpunkte im von einem Anwender in seiner Lage und/oder Länge definierten Konturabschnitt einer ersten Kontur liegen.
  12. Verfahren nach Anspruch 10 oder 11, dadurch gekennzeichnet, dass von dem Anwender ein Konturabschnitt der zweiten Kontur vorgebbar ist, in welchem eine Ähnlichkeitsbetrachtung erfolgen soll.
DE10361838A 2003-12-30 2003-12-30 Verfahren zur Bewertung von Ähnlichkeiten realer Objekte Expired - Fee Related DE10361838B3 (de)

Priority Applications (2)

Application Number Priority Date Filing Date Title
DE10361838A DE10361838B3 (de) 2003-12-30 2003-12-30 Verfahren zur Bewertung von Ähnlichkeiten realer Objekte
PCT/DE2004/002461 WO2005064526A1 (de) 2003-12-30 2004-11-04 Verfahren zur bewertung von ähnlichkeiten realer objekte

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE10361838A DE10361838B3 (de) 2003-12-30 2003-12-30 Verfahren zur Bewertung von Ähnlichkeiten realer Objekte

Publications (1)

Publication Number Publication Date
DE10361838B3 true DE10361838B3 (de) 2005-05-25

Family

ID=34485607

Family Applications (1)

Application Number Title Priority Date Filing Date
DE10361838A Expired - Fee Related DE10361838B3 (de) 2003-12-30 2003-12-30 Verfahren zur Bewertung von Ähnlichkeiten realer Objekte

Country Status (2)

Country Link
DE (1) DE10361838B3 (de)
WO (1) WO2005064526A1 (de)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102014226291A1 (de) 2014-12-17 2016-06-23 Bayerische Motoren Werke Aktiengesellschaft Vorrichtung und Verfahren zum Warnen vor Oberflächenschäden an Fahrzeugen

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103177252B (zh) * 2013-03-04 2017-04-12 苏州瑞派宁科技有限公司 一种自动识别并分割位置谱的方法及装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4406020C1 (de) * 1994-02-24 1995-06-29 Zentrum Fuer Neuroinformatik G Verfahren zur automatisierten Erkennung von Objekten
WO2002043004A2 (en) * 2000-11-22 2002-05-30 Isis Innovation Limited Detection of features in images
US6618501B1 (en) * 1999-05-06 2003-09-09 Canon Kabushiki Kaisha Object similarity calculation method and apparatus

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4406020C1 (de) * 1994-02-24 1995-06-29 Zentrum Fuer Neuroinformatik G Verfahren zur automatisierten Erkennung von Objekten
US6618501B1 (en) * 1999-05-06 2003-09-09 Canon Kabushiki Kaisha Object similarity calculation method and apparatus
WO2002043004A2 (en) * 2000-11-22 2002-05-30 Isis Innovation Limited Detection of features in images

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Shape recognition based on wavelet-transform mo- dulus maxima, Cheikh,F., Quddus,A., Gabboui,M.: Electronics, Circuits and Systems, 2000, ICECS 2000, The 7th IEEE International Conference on, Volume: 1, 17-20Dec.2000 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102014226291A1 (de) 2014-12-17 2016-06-23 Bayerische Motoren Werke Aktiengesellschaft Vorrichtung und Verfahren zum Warnen vor Oberflächenschäden an Fahrzeugen

Also Published As

Publication number Publication date
WO2005064526A1 (de) 2005-07-14

Similar Documents

Publication Publication Date Title
DE69833999T2 (de) Verfahren zur automatischen erkennung menschlicher augen in digitalbildern
DE19837004C1 (de) Verfahren zum Erkennen von Objekten in digitalisierten Abbildungen
DE60036082T2 (de) Verfahren und vorrichtung zur wiederauffindung von texturbildern
DE69817879T2 (de) Erkennung verzerrter bilder durch schnelle faltung und mittels bilderfassung von markanten punkten und volumeninformation
DE4406020C1 (de) Verfahren zur automatisierten Erkennung von Objekten
EP2584493B1 (de) Verfahren zur Unterscheidung zwischen einem realen Gesicht und einer zweidimensionalen Abbildung des Gesichts in einem biometrischen Erfassungsprozess
DE102017220307B4 (de) Vorrichtung und Verfahren zum Erkennen von Verkehrszeichen
DE102007035884B4 (de) Linienrauschunterdrückungsvorrichtung, -verfahren und -programm
WO1996007976A1 (de) Verfahren zur rekonstruktion von in rasterform vorliegenden linienstrukturen
DE10392259T5 (de) Objektkorrespondenzidentifikation ohne volle Volumenregistration
EP3685303A1 (de) Verfahren zur erkennung einer objektinstanz und/oder orientierung eines objekts
EP2756458A1 (de) Maschinelles lernverfahren zum maschinellen erlernen von erscheinungsformen von objekten in bildern
DE19928231C2 (de) Verfahren und Vorrichtung zur Segmentierung einer Punkteverteilung
EP0394959A2 (de) Verfahren zur Bildauswertung
WO2012052106A1 (de) Verfahren zur klassifizierung von mustern in bilddatensätzen
DE10361838B3 (de) Verfahren zur Bewertung von Ähnlichkeiten realer Objekte
EP0844591A1 (de) Verfahren zur Bestimmung von Massstabsfaktoren für fraktale Bildkodierung
DE102005049017B4 (de) Verfahren zur Segmentierung in einem n-dimensionalen Merkmalsraum und Verfahren zur Klassifikation auf Grundlage von geometrischen Eigenschaften segmentierter Objekte in einem n-dimensionalen Datenraum
EP2096578A2 (de) Verfahren und Vorrichtung zur Charakterisierung der Formation von Papier
WO2001086585A1 (de) Verfahren und anordnung zum ermitteln eines objekts in einem bild
EP1756748B1 (de) Verfahren zur klassifizierung eines objekts mit einer stereokamera
EP0693200B1 (de) Verfahren zur klassifizierung von objekten
DE10126375B4 (de) Verfahren und System zur Erkennung von Objekten
DE4017430C2 (de) Vorrichtung und Verfahren zur Erkennung von Mustern
AT505887B1 (de) Verfahren zur extraktion von kantensegmenten

Legal Events

Date Code Title Description
8100 Publication of patent without earlier publication of application
8364 No opposition during term of opposition
R119 Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee

Effective date: 20110701