DE102009007715A1 - Method for automatically finding electronic images in Internet, involves storing electronic images of data sets in result file, where correlation degree of electronic images with electronic search image exceeds preset threshold - Google Patents

Method for automatically finding electronic images in Internet, involves storing electronic images of data sets in result file, where correlation degree of electronic images with electronic search image exceeds preset threshold Download PDF

Info

Publication number
DE102009007715A1
DE102009007715A1 DE102009007715A DE102009007715A DE102009007715A1 DE 102009007715 A1 DE102009007715 A1 DE 102009007715A1 DE 102009007715 A DE102009007715 A DE 102009007715A DE 102009007715 A DE102009007715 A DE 102009007715A DE 102009007715 A1 DE102009007715 A1 DE 102009007715A1
Authority
DE
Germany
Prior art keywords
electronic
image
search image
supplementary information
images
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
DE102009007715A
Other languages
German (de)
Other versions
DE102009007715B4 (en
Inventor
Michael Dr. Alger
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vodafone Holding GmbH
Original Assignee
Vodafone Holding GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vodafone Holding GmbH filed Critical Vodafone Holding GmbH
Priority to DE102009007715A priority Critical patent/DE102009007715B4/en
Publication of DE102009007715A1 publication Critical patent/DE102009007715A1/en
Application granted granted Critical
Publication of DE102009007715B4 publication Critical patent/DE102009007715B4/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content

Abstract

The method involves providing supplementary information e.g. text information (43), relative to an electronic search image (21) in an analysis device (30). The search image is analyzed using an image analysis method by the analysis device. A result of the analyzed search image is compared with electronic images (32, 42, 46) using another image analysis method. The electronic images of data sets (41, 45) i.e. Internet sites, are stored in a result file (31), where a correlation degree of the electronic images with the electronic search image exceeds a preset threshold. An independent claim is also included for a system for automatically finding electronic images in a data collection.

Description

Die vorliegende Erfindung betrifft ein Verfahren sowie ein System zum automatischen Auffinden von elektronischen Bildern in einer Datensammlung, wobei die Datensammlung eine Mehrzahl von Datensätzen aufweist, die jeweils zumindest ein elektronisches Bild, optional auch das elektronische Bild ergänzende Informationen, aufweisen.The The present invention relates to a method and a system for automatic retrieval of electronic images in a data collection, wherein the data collection has a plurality of data records, the at least one electronic image, optionally also the electronic image supplementary information.

Die einfache, internationale Verbreitung von Bildmaterial im Internet hat das Bedürfnis erweckt, nach Bildern im Internet suchen zu können.The simple, international distribution of images on the Internet has aroused the need to search for pictures on the Internet to be able to.

Auf dem Gebiet der automatischen Analyse digitaler Bilder ist mittlerweile eine große Bandbreite unterschiedlicher Verfahren und Möglichkeiten bekannt geworden. Mit der zunehmenden Verbreitung der digitalen Fotografie beispielsweise ergeben sich immer neue Möglichkeiten, digitale Bilder in Kommunikationsnetzen zu übertragen und aufgrund der analysierten Inhalte der Bilder immer neue Anwendungen zu erzeugen.On the field of automatic analysis of digital images is now a wide range of different procedures and options known. With the proliferation of digital Photography, for example, there are always new possibilities to transmit digital images in communication networks and due to the analyzed contents of the images always new applications to create.

Ein grundlegendes Merkmal hierbei ist, dass die Inhalte der digitalen Bilder analysiert werden können. Dies geschieht in der Regel mittels geeigneter Bildanalyseverfahren, die auf entsprechenden Rechnereinheiten implementiert sind und die die Inhalte der digitalen Bilder, vorzugsweise automatisch, analysieren.One basic feature here is that the contents of the digital Images can be analyzed. This happens in the Usually by means of suitable image analysis methods, which are based on appropriate Computer units are implemented and the contents of the digital Analyze images, preferably automatically.

Ein Anwendungsbeispiel für den Einsatz derartiger Bildanalyseverfahren ist etwa die bildbasierte Suche oder Anfrage. Eine solche Lösung ist beispielsweise in der DE 102 45 900 A1 beschrieben. Bei dieser bekannten Lösung wird mittels eines elektronischen Geräts mit Kamerafunktion ein Bild aufgenommen, das anschließend zu einer Rechnereinheit übertragen wird. Dort wird das Bild mittels eines Bilderkennungsverfahrens analysiert und in symbolische Informationen umgesetzt. Aufgrund dieser Symbole können dann geeignete Informationen bereitgestellt werden.An application example for the use of such image analysis methods is, for example, image-based search or inquiry. Such a solution is for example in the DE 102 45 900 A1 described. In this known solution, an image is taken by means of an electronic device with camera function, which is then transmitted to a computer unit. There, the image is analyzed by means of an image recognition process and converted into symbolic information. Due to these symbols, appropriate information can then be provided.

Es sind aber auch Lösungen bekannt, bei denen Bilder als Suchanfrage in ein System eingegeben werden und bei denen dann eine Datenbank mit vielen Referenzbildern nach einem ähnlichen oder gleichen Bild durchsucht wird. Die Treffer werden als Liste mit den passenden Referenzbildern ausgegeben. Der Nutzer sendet in einem solchen Fall ein Bild als Suchanfrage an eine Rechnereinheit. Das System zur bildbasierten Suche vergleicht nun das eingesendete Bild mit Referenzbildern in einer Datenbank. Die passenden Referenzbilder werden zu einer Trefferliste zusammengefasst.It But there are also known solutions where images as a query be entered into a system and then where a database with many reference pictures after a similar or same Image is searched. The hits are as a list with the appropriate ones Reference pictures output. The user sends in such a case an image as a query to a computer unit. The system for Image-based search now compares the submitted image with reference images in a database. The matching reference pictures become a hit list summarized.

Es gibt aber auch eine andere Art der Bildsuche mit Hilfe von Suchmaschinen im Internet. Hier wird ein Begriff in Form einer Textinformation eingegeben, welcher dann Bilder als Antwort liefert. Es kann eine Beschreibung des Bildes als Suchbegriff verwendet werden, und die Bilder der Datenbank, die in der Regel mit als „Tags” bezeichneten Zusatzinformationen in Form von Schlagworten verknüpft sind, werden mit den Suchbegriffen verglichen. Die passenden Referenzbilder werden dann als Trefferliste zusammengefasst.It But there is also another type of image search with the help of search engines on the Internet. Here is a term in the form of text information input, which then delivers images as an answer. It can be one Description of the image can be used as a search term, and the Images of the database, usually referred to as "tags" Additional information linked in the form of keywords are compared with the search terms. The matching reference pictures are then summarized as a hit list.

Die einfache, internationale Verbreitung von Bildmaterial im Internet macht es zunehmend schwer, die Einhaltung von Rechten an Bildern, beispielsweise an Urheberrechten, zu kontrollieren. Es besteht deshalb das Bedürfnis, nach Bildern oder Bildern von geschützten Produkten selbst im Internet suchen zu können, um deren missbräuchliche Verwendung festzustellen und gegebenenfalls zu verfolgen. Dabei muss aber gewährleistet sein, dass die exakte Kopie eines Bildes, oder eine ähnliche Abbildung eines bestimmten Produktes gefunden wird.The simple, international distribution of images on the Internet makes it increasingly difficult to comply with rights to images, for example, copyright. It exists therefore the need for images or images of protected To be able to search for products on the internet in order to establish improper use and, where appropriate, to pursue. But it must be ensured that the exact copy of a picture, or a similar picture a particular product is found.

Dazu sind die bekannten Lösungen nicht gut geeignet. Ein Abgleich findet heute manuell statt und ist deshalb kaum vollständig möglich. Andere Ansätze versehen schätzenswerte Bilder mit digitalen Wasserzeichen und prüfen die unerlaubte Verwendung durch Dritte, indem speziell angepasste Suchmaschinen diese Wasserzeichen suchen. Ein rein manueller Abgleich ist zudem aufwändig, personalintensiv, teuer und langsam. Zudem ist eine direkte Antwort „dieses Bild befindet sich auf diesen bestimmten Internetseiten” ist automatisch nicht möglich. Die visuelle Prüfung, welche dieser Bilder Kopien eines bestimmten, zu schützenden Bildes sind, ist somit derzeit kaum machbar. Weiterhin kann die Kennzeichnung geschützter Bilder manipuliert werden, erfordert Verwaltungsaufwand. Die bekannten Lösungen können nur markierte Bilder schützen, die im Internet oder sonst wie elektronisch gespeichert sind, aber weder den Bestand älterer, noch unmarkierter Bilder noch Bilder Dritter von geschützten Gegenständen. Schließlich bieten die bekannten Lösungen auch nicht die Möglichkeit, direkt nach Kopien von Bildern oder nach fremden Abbildungen eigener Produkte suchen zu können.To the known solutions are not well suited. An adjustment takes place manually today and is therefore hardly complete possible. Other approaches provide estimates Pictures with digital watermarks and check the unauthorized Use by third parties, by using specially adapted search engines look for these watermarks. A purely manual adjustment is also time-consuming, labor-intensive, expensive and slow. In addition is a direct answer "this picture is on this certain websites "is not automatically possible. The visual check which of these pictures are copies of a certain image to be protected is thus currently hardly feasible. Furthermore, the marking may be protected Manipulating images requires administrative effort. The known solutions can only protect marked images on the internet or otherwise stored electronically, but neither the stock of older, still unmarked pictures still thirds of protected Objects. Finally, the well-known offer Solutions also do not have the option to go directly after Copies of pictures or foreign pictures of own products to be able to search.

Ausgehend vom genannten Stand der Technik liegt der vorliegenden Erfindung die Aufgabe zugrunde, ein Verfahren und ein System der eingangs genannten Art derart weiterzubilden, dass die geschilderten Nachteile vermieden werden können. Insbesondere sollen ein Verfahren und ein System bereitgestellt werden können, mit dem auf einfache und dennoch zufriedenstellende Weise erreicht werden kann, dass elektronische Bilder in einer Datensammlung gefunden werden können.outgoing Of the cited prior art, the present invention the task is based, a method and a system of the aforementioned Further develop type such that avoided the disadvantages can be. In particular, a method and a System can be provided with the simple and yet satisfactorily can be achieved that electronic images can be found in a data collection.

Diese Aufgabe wird erfindungsgemäß gelöst durch das Verfahren mit den Merkmalen gemäß dem unabhängigen Patentanspruch 1 sowie durch das System mit den Merkmalen gemäß dem unabhängigen Patentanspruch 10. Weitere Merkmale und Details der Erfindung ergeben sich aus den Unteransprüchen, der Beschreibung sowie der Zeichnung. Dabei gelten Merkmale und Details, die im Zusammenhang mit dem Verfahren beschrieben sind, selbstverständlich auch im Zusammenhang mit dem System, und jeweils umgekehrt, so dass hinsichtlich der Offenbarung zu beiden Erfindungsaspekten stets wechselseitig und vollinhaltlich Bezug genommen wird.This object is achieved by the method with the features according to the independent claim 1 and by the system having the features according to independent claim 10. Further features and details of the invention will become apparent from the dependent claims, the description and the drawings. In this case, features and details that are described in connection with the method, of course, also in connection with the system, and in each case vice versa, so that with respect to the disclosure of both aspects of the invention is always reciprocal and full content reference.

Mit der vorliegenden Erfindung kann insbesondere festgestellt werden, ob ein bestimmtes Bild unerlaubt in einer Datensammlung, etwa im Internet, verwendet wurde. Weiterhin kann die Fundstelle identifiziert werden. Durch die vorliegende Erfindung kann insbesondere festgestellt werden, ob Abbildungen Dritter eigener Produkte im Internet oder sonst wo veröffentlicht ist.With In particular, it can be stated in the present invention that whether a particular image is illegal in a data collection, such as in the Internet, was used. Furthermore, the reference can be identified become. In particular, it can be stated by the present invention whether pictures of third party own products on the Internet or where else is published.

Gemäß dem ersten Aspekt der Erfindung wird ein Verfahren zum automatischen Auffinden von elektronischen Bildern in einer Datensammlung, wobei die Datensammlung eine Mehrzahl von Datensätzen aufweist, die jeweils zumindest ein elektronisches Bild aufweisen, bereitgestellt, das gekennzeichnet ist durch folgende Schritte: ein elektronisches Suchbild und auf das elektronische Suchbild bezogene ergänzende Informationen werden in einer Analyseeinrichtung bereitgestellt; über ein automatisches Suchverfahren werden mittels der Analyseeinrichtung anhand der das elektronische Suchbild ergänzenden Informationen zu den ergänzenden Informationen in Bezug stehende elektronische Bilder in den Datensätzen der Datensammlung gesucht, das elektronische Suchbild wird in der Analyseeinrichtung mittels einer ersten Bildanalysemethode analysiert; das Ergebnis des analysierten elektronischen Suchbilds wird in der Analyseeinrichtung mittels einer zweiten Bildanalysemethode mit den zu den ergänzenden Informationen in Bezug stehenden elektronischen Bildern verglichen; diejenigen zu den ergänzenden Informationen in Bezug stehenden elektronischen Bilder der Datensätze, deren Übereinstimmungsgrad mit dem elektronischen Suchbild einen vorgegebenen Schwellwert übersteigt, werden in einer Resultatsdatei abgelegt.According to the The first aspect of the invention is a method for automatic Finding electronic images in a data collection, wherein the data collection has a plurality of data records, each having at least one electronic image, provided, characterized by the following steps: an electronic Search image and related to the electronic search image complementary Information is provided in an analyzer; above an automatic search method will be used by the analyzer on the basis of the electronic search image additional information related to the supplementary information related electronic Images searched in records of data collection, the electronic Search image is in the analysis device by means of a first image analysis method analyzed; the result of the analyzed electronic search image is used in the analysis device by means of a second image analysis method with the information related to the supplementary information compared to electronic pictures; those to the supplementary ones Information related electronic images of the records, their degree of agreement with the electronic search image exceeds a predetermined threshold, are in a Result file filed.

Vorteilhaft können die Datensätze jeweils zumindest ein elektronisches Bild sowie das elektronische Bild ergänzende Informationen aufweisen.Advantageous the records can each have at least one electronic Image as well as the electronic image supplementary information exhibit.

Mit dem erfindungsgemäßen Verfahren wird eine Möglichkeit geschaffen, bestimmte Bilder in einer Datensammlung aufzufinden.With the method according to the invention becomes a possibility created to find certain images in a data collection.

Das erfindungsgemäße Verfahren dient zum automatischen Auffinden von elektronischen Bildern in einer Datensammlung, wobei die Datensammlung eine Mehrzahl von Datensätzen aufweist, die jeweils zumindest ein elektronisches Bild, optional auch das elektronische Bild ergänzende Informationen, aufweisen. Dabei ist die Erfindung nicht auf bestimmte Typen von Datensätzen oder auf eine bestimmte Ausgestaltung der Datensammlung beschränkt. Beispielsweise kann vorgesehen sein, dass die Datensammlung in Form eines Datennetzes, insbesondere als das Internet, als ein Intranet, oder dergleichen ausgebildet ist. Handelt es sich bei der Datensammlung um das Internet, so sind die Datensätze der Datensammlung vorteilhaft als Internetseiten ausgebildet.The inventive method is used for automatic Finding electronic images in a data collection, wherein the data collection has a plurality of data records, each one at least an electronic image, optionally also the electronic Image supplementary information. It is the Invention is not limited to certain types of records or limited to a specific form of data collection. For example, it may be provided that the data collection in the form a data network, especially as the Internet, as an intranet, or the like is formed. Is it the data collection to the Internet, so are the datasets of the data collection advantageous trained as websites.

Ein Datensatz umfasst zunächst wenigstens ein elektronisches Bild, wobei natürlich auch mehrere Bilder pro Datensatz vorhanden sein können. Weiterhin kann der Datensatz vorteilhaft auch noch das wenigstens eine elektronische Bild ergänzende Informationen aufweisen. Auch diese Informationen können auf unterschiedliche Weise ausgebildet sein. Hierbei kann es sich beispielsweise um Textinformationen, Audioinformationen, Adressinformationen, und dergleichen handeln. Vorteilhaft können die das wenigstens eine elektronische Bild der Datensätze ergänzenden Informationen in Form von Textinformationen und/oder Adressinformationen ausgebildet sein. Wenn es sich bei den Datensätzen um Internetseiten handelt, kann es sich bei den Adressdaten vorteilhaft um die Internetadresse der entsprechenden Internetseite, die so genannte URL, handeln.One Record initially comprises at least one electronic Picture, of course, several pictures per record can be present. Furthermore, the data set can be advantageous even the at least one electronic picture complementary Have information. Also this information can be up be formed different ways. This can be for example to text information, audio information, address information, and act like that. Advantageously, the at least an electronic image of the datasets complementary Information in the form of textual information and / or address information be educated. If the records are web pages, it can be advantageous in the address data to the Internet address the corresponding website, the so-called URL.

Zu Beginn des Verfahrens werden ein elektronisches Suchbild und auf das elektronische Suchbild bezogene ergänzende Informationen in einer Analyseeinrichtung bereitgestellt. Dem Verfahren wird somit ein elektronisch gespeichertes Bild übergeben. Zusätzlich werden das Suchbild ergänzende Informationen, beispielsweise beschreibende Stichworte, übergeben. Dabei kann das Verfahren auf unterschiedliche Weise gestartet werden. Einige vorteilhafte, jedoch nicht ausschließliche Beispiele werden im Folgenden näher erläutert.To Start of the procedure will be an electronic search image and on the electronic search image related additional information provided in an analysis device. The method is thus pass an electronically stored image. additionally the search image will be supplemental information, for example descriptive keywords, passed. The process can be be started in different ways. Some advantageous, however, non-exclusive examples are provided below explained in more detail.

Beispielsweise kann vorgesehen sein, dass das Suchbild und die ergänzenden Informationen in der Analyseeinrichtung abgelegt sind und dass diese zu Beginn des Verfahrens aktiviert werden. Alternativ oder zusätzlich kann vorgesehen sein, dass das Suchbild und die ergänzenden Informationen von der Analyseeinrichtung ermittelt werden. Alternativ oder zusätzlich kann auch vorgesehen sein, dass das Suchbild und die ergänzenden Informationen von der Analyseeinrichtung über ein zur Analyseeinrichtung externes Endgerät auf die Analyseeinrichtung übertragen werden.For example can be provided that the search image and the supplementary Information is stored in the analyzer and that these too Start of the procedure to be activated. Alternatively or in addition can be provided that the search image and the supplementary Information to be determined by the analyzer. alternative or additionally, it may also be provided that the search image and the supplemental information from the analyzer via an external device to the analysis device transmitted to the analysis device become.

Beispielsweise kann ein elektronisch gespeichertes Bild an das Verfahren übergeben werden. Es ist aber auch möglich, dass ein Gegenstand oder ein gedrucktes Bild fotografiert und elektronisch gespeichert an das Verfahren gesendet werden. Dies kann beispielsweise mit einer digitalen Fotokamera, einem Mobiltelefon mit einer solchen Kamerafunktion, oder dergleichen erfolgen.For example, an electronically stored image can be transferred to the method. It But it is also possible that an object or a printed image is photographed and electronically stored sent to the process. This can be done for example with a digital still camera, a mobile phone with such a camera function, or the like.

Zusätzlich werden beschreibende Stichworte übergeben. In einer Ausführung der Erfindung können auch Bilder auf der Internetseite eines Auftraggebers extrahiert und – vorzugsweise gesammelt – and das Verfahren übergeben werden. Dabei können Stichworte und beschreibenden Texte, wie beispielsweise Produktnamen, ebenfalls direkt aus der Internetseite gelesen werden.additionally descriptive keywords are passed. In one execution The invention may include images on the website extracted from a client and - preferably collected - and the Procedure to be passed. It can keywords and descriptive texts, such as product names, as well be read directly from the website.

Das Verfahren, beziehungsweise das System kann in regelmäßigen Abständen die Datensammlung, beispielsweise das Internet, durchsuchen und dabei früher identifizierte Fundstellen auch vorrangig bearbeiten.The Procedure, or the system can be in regular Intervals the data collection, for example the Internet, search and find previously identified sites also prioritize.

Nach Bereitstellung des Suchbildes und der dazu ergänzenden Informationen wird über ein automatisches Suchverfahren mittels der Analyseeinrichtung anhand der das elektronische Suchbild ergänzenden Informationen zu den ergänzenden Informationen in Bezug stehende elektronische Bilder in den Datensätzen der Datensammlung gesucht. Wenn die Datensammlung als Internet und die Datensätze als Internetseiten ausgebildet sind, können die das Suchbild ergänzenden Informationen in eine Suchmaschine eingegeben und darauf basierend zu den ergänzenden Informationen in Bezug stehende, das heißt „passende” Bilder in den einzelnen Datensätzen der Datensammlung gesucht und gefunden werden. Zu jedem zu prüfenden Suchbild gibt es nun eine Anzahl von Suchbegriffen, nämlich die ergänzenden Informationen, die in eine Suchmaschine herkömmlicher Technik eingegeben werden können. Handelt es sich bei der Datensammlung um das Internet, können so alle Bilder weltweit geliefert werden, die die Suchkriterien erfüllen.To Provision of the search image and the complementary Information is provided through an automatic search procedure by means of the analysis device on the basis of the electronic search image additional information about the supplementary information related electronic images in the datasets the data collection searched. If the data collection as Internet and the records are designed as websites the information that supplements the search image in a search engine entered and based on the additional information related, that is "fitting" images searched in the individual datasets of the data collection and be found. For each search image to be reviewed There are now a number of search terms, namely the supplementary Information in a search engine of conventional technology can be entered. Is it the data collection around the internet, so all the pictures can be delivered worldwide who meet the search criteria.

Zusätzlich wird auch das elektronische Suchbild in der Analyseeinrichtung mittels einer Bildanalysemethode analysiert. Das Suchbild wird somit zusätzlich als Referenz einem Verfahren zur Bilderkennung und Bildanalyse unterworfen.additionally Also, the electronic search image in the analysis device by means of an image analysis method. The search image is thus additional as a reference subjected to a method for image recognition and image analysis.

Das analysierte elektronische Suchbild wird dann in der Analyseeinrichtung mittels einer Bildanalysemethode mit den zu den ergänzenden Informationen in Bezug stehenden elektronischen Bildern verglichen. Sowohl das Suchbild, als auch die gefundenen Bilder werden allesamt in die Bilderkennung und Bildanalyse gegeben und miteinander verglichen.The analyzed electronic search image is then in the analysis device by means of an image analysis method with those to the complementary ones Information compared in relation to electronic images. Both the search image and the images found are all given in the image recognition and image analysis and compared with each other.

Die vorliegende Erfindung ist nicht auf bestimmte Bildanalysemethoden beschräkt. Beispielsweise kann die Bildanalyse nach der ViPR-Methode (Visual Pattern Recognition), unter Verwendung des so genannten SIFT-Algorithmus, oder dergleichen erfolgen. Je nach Ausgestaltung können die erste und zweite Bildanalysemethode unterschiedlich ausgebildet sein. Natürlich ist auch denkbar, dass die Bildanalysen mit nur einer einzigen, einheitlichen Bildanalysemethode durchgeführt werden.The The present invention is not limited to particular image analysis methods beschräkt. For example, the image analysis after the ViPR (Visual Pattern Recognition) method, using the so-called SIFT algorithm mentioned, or the like. Depending on the design The first and second image analysis methods can be different be educated. Of course, it is also conceivable that the Image analysis with a single, unified image analysis method be performed.

Diejenigen zu den ergänzenden Informationen in Bezug stehenden elektronischen Bilder der Datensätze, deren Übereinstimmungsgrad mit dem elektronischen Suchbild einen vorgegebenen Schwellwert übersteigt, werden in einer Resultatsdatei abgelegt, bei der es sich um eine Art Zwischenergebnis handeln kann.Those related to the supplementary information related electronic Pictures of the records, their degree of agreement with the electronic search image exceeds a predetermined threshold, are stored in a results file, which is a Type intermediate result can act.

Über den Schwellenwert kann bestimmt werden, wie groß der Umfang der tatsächlich relevanten Bilder ist. Insbesondere kann vorteilhaft sein, wenn der Grad der Übereinstimmung zweier Bilder, der durch den Schwellenwert definiert wird, einstellbar gestaltet ist. Auf diese Weise können auch zu dem Suchbild nur ähnliche Bilder erfasst werden. Dies können beispielsweise Fotos eines Produktes sein, welche ein Dritter angefertigt hat, die aber ein geschütztes Produkt zeigen. Die Ähnlichkeit mit den eigenen Bildern des Produktes, den Suchbildern, ist Maß für die Entscheidung zur weiteren Verarbeitung.about the threshold can be determined by how large the scope which is actually relevant pictures. In particular, can be advantageous if the degree of agreement of two Images defined by the threshold are made adjustable is. In this way, only similar to the search image Pictures are captured. This can be photos, for example a product made by a third party, but show a protected product. The similarity with the own pictures of the product, the search pictures, is measure for the decision for further processing.

Mit der Resultatsdatei kann dann auf unterschiedliche Weise weiter fortgefahren werden.With the result file can then continue in different ways become.

Beispielsweise können die in der Resultatsdatei abgelegten elektronischen Bilder von der Analyseeinrichtung als Ergebnisdatei bereitgestellt werden.For example can be stored in the results file electronic Images provided by the analyzer as a result file become.

Vorteilhaft können die in der Resultatsdatei abgelegten elektronischen Bilder einem weiteren Analyseschritt unterworfen werden, bei dem die die elektronischen Bilder ergänzenden Informationen anhand vorgegebener, insbesondere einstellbarer, Analyseparameter analysiert werden, bei dem mit den Analyseparametern in Bezug stehende ergänzende Informationen zu den elektronischen Bildern aus den Datensätzen extrahiert werden und bei dem von der Analyseeinrichtung eine Ergebnisdatei bereitgestellt wird, die zumindest eine Teilmenge der in der Resultatsdatei abgelegten elektronischen Bilder und ergänzend dazu extrahierte ergänzende Informationen aufweist.Advantageous can be stored in the results file electronic Images are subjected to a further analysis step in which the information supplementing the electronic images on the basis of given, in particular adjustable, analysis parameters analyzed in terms of the analysis parameters additional information about the electronic pictures extracted from the records and by the analyzer a result file is provided that contains at least a subset the electronic images stored in the result file and in addition to have extracted additional information.

Wenn es sich bei der Datensammlung um das Internet, und bei den Datensätzen um Internetseiten handelt, können zu den gefundenen und nicht verworfenen Bildern somit zusätzlich auch die Fundstellen, etwa die Internetadressen in Form der URLs ausgegeben werden.If Data collection is about the internet, and records Internet sites can be found and found not discarded pictures thus also the references, For example, the Internet addresses are output in the form of the URLs.

Bei der Ergebnisdatei kann es sich dann um eine Art liste handeln, aus der ersichtlich wird, wo sich die Suchbilder in der Datensammlung befinden.at the result file can then be a kind of list which will reveal where the search images in the data collection are located.

Vorteilhaft kann die von der Analyseeinrichtung bereitgestellte Ergebnisdatei von der Analyseeinrichtung auf ein externes Endgerät übertragen wird. Dabei kann es sich beispielsweise um ein solches Endgerät handeln, von dem auch das Suchbild ursprünglich auf die Analyseeinrichtung übertragen worden ist.Advantageous may be the result file provided by the analyzer transferred from the analysis device to an external terminal becomes. This may be, for example, such a terminal act of which also the search image originally on the Analysis device has been transferred.

Das Verfahren kann weitere Informationen wie Texte und Beschreibungen mit einbeziehen. So kann beispielsweise ein Angebot eines bestimmten Produkts identifiziert werden anhand des Bildes, und als verdächtig festgehalten werden, wenn der Preis des Angebotes deutlich unter dem Marktpreis ist.The Procedure can provide more information such as texts and descriptions to include. For example, an offer of a particular product be identified by the image, and as suspicious be kept if the price of the offer is well below is the market price.

Das Verfahren kann auf die Suche in Datenbanken speziell angepasst werden, beispielsweise hinsichtlich der aktuellen und zurückliegenden Angebote bei Auktions-Seiten oder Online-Shops.The Method can be customized to search in databases, For example, with regard to the current and past Offers at auction sites or online shops.

Markenpiraterie ist ein globales Problem, das durch die automatische Suche nach Bildern kopierter Produkte wirksamer bekämpft werden kann als durch manuelle Verfahren. Dies ist durch das erfindungsgemäße Verfahren und dessen vorteilhafte Weiterbildungen nunmehr möglich. Ebenso nimmt die unerlaubte Verwendung von Bildmaterial zu, ohne dass sie bisher wirksam mit technischen Mitteln unterbunden werden könnte. Auch dies ist mit dem Verfahren gemäß der vorliegenden Erfindung nunmehr möglich.piracy is a global problem caused by the automatic search for Pictures of copied products can be combated more effectively than through manual procedures. This is due to the invention Method and its advantageous developments now possible. Likewise, the unauthorized use of image material increases without that they are hitherto effectively prevented by technical means could. This is also with the method according to the present invention now possible.

Die Vorteile der Erfindung liegen insbesondere in der Beschreibung eines automatischen Verfahrens zur Suche einer großen Zahl von Bildern internationaler Verbreitung.The Advantages of the invention are in particular in the description of a automatic method to search a large number of Images of international distribution.

Gemäß dem zweiten Aspekt der Erfindung wird ein System zum automatischen Auffinden von elektronischen Bildern in einer Datensammlung, wobei die Datensammlung eine Mehrzahl von Datensätzen aufweist die jeweils zumindest ein elektronisches Bild aufweisen, bereitgestellt, das gekennzeichnet ist durch eine Analyseeinrichtung, aufweisend eine Einrichtung zum Bereitstellen eines elektronischen Suchbilds und auf das elektronische Suchbild bezogene ergänzende Informationen, eine Sucheinrichtung zum automatischen Suchen von zu den ergänzenden Informationen in Bezug stehenden elektronischen Bildern in den Datensätzen der Datensammlung anhand der das elektronische Suchbild ergänzenden Informationen, eine Einrichtung zur Bildanalyse des elektronischen Suchbilds, eine Vergleichseinrichtung, die ausgebildet ist, um das Ergebnis des analysierten elektronischen Suchbilds mittels einer Bildanalysemethode mit den zu den ergänzenden Informationen des Suchbildes in Bezug stehenden elektronischen Bildern zu vergleichen, und eine Einrichtung zum Ablegen einer Resultatsdatei, in der diejenigen zu den ergänzenden Informationen des Suchbildes in Bezug stehenden elektronischen Bilder der Datensätze, deren Übereinstimmungsgrad mit dem elektronischen Suchbild einen vorgegebenen Schwellwert übersteigt, abgelegt sind.According to the The second aspect of the invention is a system for automatically locating of electronic images in a data collection, the data collection a plurality of data sets each have at least having an electronic image provided is by an analysis device, comprising means for Provide an electronic search image and on the electronic Search image related supplementary information, a search facility to automatically search for supplemental information related electronic images in the datasets the data collection on the basis of the electronic search image Information, a device for image analysis of the electronic Search image, a comparison device, which is designed to the Result of the analyzed electronic search image by means of an image analysis method with the to the additional information of the search image to compare related electronic images, and a Device for filing a result file containing those related to the supplementary information of the search image standing electronic pictures of the records, their degree of agreement with the electronic search image exceeds a predetermined threshold, are stored.

Insbesondere weist das System Mittel zur Durchführung des wie vorstehend beschriebenen erfindungsgemäßen Verfahrens auf, so dass auf die Ausführungen zum Verfahren vollinhaltlich Bezug genommen und verwiesen wird.Especially the system comprises means for carrying out the above described inventive method, so that the comments on the procedure in full Reference is made and referred.

Vorteilhaft können die Datensätze jeweils zumindest ein elektronisches Bild sowie das elektronische Bild ergänzende Informationen aufweisen.Advantageous the records can each have at least one electronic Image as well as the electronic image supplementary information exhibit.

Vorteilhaft verfügt die Einrichtung zum Ablegen einer Resultatsdatei auch über Vergleichsmittel, die die gefundenen Bilder gegen den vorgegebenen Schwellenwert vergleichen.Advantageous has the facility to store a results file also via comparison means, the found images against compare the given threshold.

Vorteilhaft kann das System zum automatischen Auffinden von elektronischen Bildern in einer Datensammlung ausgebildet sein, die in Form eines Datennetzes, insbesondere als das Internet, ausgebildet ist. Insbesondere können die Datensätze der Datensammlung als Internetseiten ausgebildet sein. Vorteilhaft können die das wenigstens eine elektronische Bild eines Datensatzes ergänzenden Informationen in Form von Textinformationen und/oder Adressinformationen ausgebildet sein.Advantageous The system can automatically find electronic pictures be formed in a data collection in the form of a data network, especially as the Internet is trained. In particular, you can the datasets of the data collection are web pages be. Advantageously, the at least one electronic Image of a record of complementary information in the form be formed of text information and / or address information.

Das System kann vorzugsweise eine Einrichtung zum Erzeugen einer Ergebnisdatei aus der Resultatsdatei aufweisen.The System may preferably include means for generating a result file from the results file.

Vorteilhaft kann die Analyseeinrichtung des Systems eine Einrichtung zur Durchführung eines weiteren Analyseschritts aufweisen, die zur Analyse von die elektronischen Bilder ergänzenden Informationen anhand vorgegebener, insbesondere einstellbarer, Analyseparameter ausgebildet ist, wobei die Analyseeinrichtung eine Extraktionseinrichtung zum Extrahieren von mit den Analyseparametern in Bezug stehenden ergänzenden Informationen zu den elektronischen Bildern aufweist, und wobei die Analyseeinrichtung eine Einrichtung zum Erzeugen einer Ergebnisdatei aufweist, welche zur Erzeugung einer Ergebnisdatei aus zumindest einer Teilmenge der in der Resultatsdatei abgelegten elektronischen Bilder und ergänzend dazu extrahierter ergänzender Informationen ausgebildet ist.Advantageous For example, the analyzer of the system may include means for performing a further analysis step, for the analysis of the electronic images supplementary information predetermined, in particular adjustable, analysis parameters formed wherein the analyzing means comprises extracting means for extracting complementary to the analysis parameters Having information about the electronic images, and wherein the analyzing means comprises means for generating a result file which, for generating a result file from at least a subset of the electronic files stored in the results file Pictures and additional complementary extracted Information is formed.

Vorteilhaft ist weiterhin ein System, bei dem der Analyseeinrichtung ein elektronisches Suchbild und auf das elektronische Suchbild bezogene ergänzende Informationen bereitgestellt werden, und das dadurch gekennzeichnet ist, dass die Analyseeinrichtung eine Einrichtung, in der das Suchbild und die ergänzenden Informationen in der Analyseeinrichtung abgelegt sind, sowie Mittel zum Aktivieren des Suchbilds und der ergänzenden Informationen aufweist und/oder dass die Analyseeinrichtung eine Einrichtung zum Ermitteln des Suchbilds und der ergänzenden Informationen aufweist und/oder dass die Analyseeinrichtung eine Schnittstelle zu wenigstens einem externen Endgerät aufweist, die zum Empfangen eines Suchbilds und der das Suchbild ergänzenden Informationen von einem externen Endgerät und/oder zum Übertragen einer Ergebnisdatei zu einem externen Endgerät ausgebildet ist.Also advantageous is a system in which the analysis device is provided with an electronic search image and supplementary information relating to the electronic search image, and characterized in that the analysis device has a device in which the search image and the supplementary information are stored in the analysis device, as well as means for activating the search image and the supplementary information and / or that the analysis device comprises means for determining the search image and the supplementary Has information and / or that the analysis device has an interface to at least one external terminal, which is adapted to receive a search image and the search image complementary information from an external terminal and / or for transmitting a result file to an external terminal.

Die vorliegende Erfindung stellt insbesondere eine Möglichkeit bereit, um im Internet nach Bildern und Produktfotos zu suchen, wobei als Ergebnis die Fundstellen gemeldet werden. Dies geschieht beispielsweise nach einem „Match” mit eingestellten Fotos. Auch ist ein regelmäßiges Crawlen bestimmter Internet-Domains oder eine On-Demand-Suche möglich.The in particular, the present invention provides a possibility ready to search the Internet for pictures and product photos, the results are reported as result. This happens, for example after a "match" with set photos. Also is a regular crawling of certain Internet domains or an on-demand search possible.

Vorteile der Erfindung gegenüber dem Stand der Technik sind insbesondere, dass keine Wasserzeichen in den zu überwachenden Bildern vorhanden sein müssen, dass kein Verwaltungsaufwand erforderlich ist, dass keine Manipulation möglich ist und dass eine sofortige Prüfung des Bestandes durchführbar ist. Durch die Erfindung können eigene Bilder und fremde Bilder eigener Produkte ermittelt werden. Die vorliegende Erfindung ist insbesondere als Online-Service realisierbar. Ein Kunde lädt Bilder seiner Produkte hoch, wählt den genauen Service und erhält die Ergebnisse, beispielsweise per eMail.advantages of the invention over the prior art are in particular that no watermarks in the images to be monitored must be present that no administrative burden required is that no manipulation is possible and that one immediate examination of the stock is feasible. The invention allows own pictures and foreign pictures own products. The present invention is especially as an online service feasible. A customer loads Uploads pictures of his products, chooses the exact service and receive the results, for example by eMail.

Das erfindungsgemäße Verfahren und das erfindungsgemäße System aktiviert beispielsweise Produktfotos, durchsucht ausgewählte Domains anhand der zugehörigen Beschreibung und matcht die gefundenen Bilder – vorteilhaft zur Nachtzeit bei geringer Auslastung des Systems oder zu geplanten Zeiten zur Optimierung der Auslastung. Bei Treffern kann die Fundstelle, beispielsweise die URL, der Betreiber und dergleichen zur weiteren Verfolgung an den Kunden gegeben werden – beispielsweise ohne Kosten in Form eines reinen Online-Betriebs.The inventive method and the invention For example, System enables product photos, searches selected ones Domains based on the corresponding description and matcht the pictures found - advantageous at night at low Utilization of the system or at scheduled times for optimization the utilization. For hits, the reference, for example the URL, the operator and the like for further prosecution to the Be given to customers - for example, without cost in the form a pure online operation.

Die vorliegende Erfindung lässt sich folglich auch wie folgt umschreiben. Es wird ein elektronisches Suchbild genommen, zu dem ergänzende Informationen in Form einer Beschreibung oder dergleichen gehören. Auf Basis der ergänzenden Informationen werden über eine Suchmaschine andere Bilder gefunden. Erfindungsgemäß geht es nun darum herauszufinden, welche der gefundenen Bilder als Fundstelle im Vergleich zum Suchbild geeignet sind. Dazu werden alle gefundenen Bilder mit dem Suchbild verglichen. Solche gefundenen Bilder, die nicht in einem gewissen Maße zum Suchbild identisch sind, werden verworfen. Bei den relevantren gefundenen Bildern werden dazu ergänzende Informationen, beispielsweise die dazugehörigen Internetseiten, nach – insbesondere einstellbaren – Kriterien analysiert. Es wird eine Ergebnisliste mit den passenden Bildern und dazugehörigen Informationen, beispielsweise den Internetadressen, erstellt und dem Kunden verfügbar gemacht. Diese Fundstellen können dann einer genaueren Begutachtung unterzogen werden.The Consequently, the present invention can also be described as follows rewrite. An electronic search image is taken, to which additional information in the form of a description or belong to the same. Based on the supplementary Information gets through a search engine other pictures found. According to the invention, it is now about finding out Which of the images found as a reference in comparison to the search image are suitable. For this, all images found with the search image compared. Such found images that are not in a certain Dimensions to the search image are identical, are discarded. at the relevant images found become complementary Information, such as the associated websites, according to - in particular adjustable - criteria analyzed. It will be a result list with the matching pictures and related Information, such as the Internet addresses, created and made available to the customer. These sites can then be subjected to a closer appraisal.

Für die vorliegende Erfindung ist eine Vielzahl unterschiedlicher Anwendungsmöglichkeiten denkbar. Beispielsweise kann ein Produkthersteller Preisvergleichsportale auf Angebote seiner Marke mit weit unter dem üblichen liegenden Preisen überwachen. Ein Produkthersteller kann Online-Auktionshäuser nach Angeboten mit Fotos von seiner Webseite, die seine Rechte verletzen, durchsuchen. Ein Produkthersteller kann gegen Produktfälscher vorgehen. Produkthersteller können graue Importeure über Markenrechtsverletzungen verfolgen. Internet- oder Werbeagentur können die unautorisierte Verbreitung von Fotos im Internet, die von den Sites der Kunden entnommen wurden, verfolgen. Eine Bildagentur kann für Kunden die Originalität eines Bildes anhand der – auch legitimen – Verbreitung und Nutzung durch Andere prüfen.For The present invention is a variety of different applications conceivable. For example, a product manufacturer may price comparison portals on offers of its mark with far below the usual Monitor prices. A product manufacturer can be online auction houses for offers with photos from his website that violate his rights, search. A product manufacturer can counter product counterfeiters Action. Product manufacturers can gray importers about trademark infringement follow. Internet or advertising agency can use the unauthorized Dissemination of photos on the Internet, taken from the sites of customers were, track. A picture agency can provide for customers Originality of an image on the basis of - even legitimate - distribution and use by others.

Die Erfindung wird nachfolgend anhand eines Ausführungsbeispiels in größerem Detail beschrieben. Dabei ist in der einzigen Figur ein erfindungsgemäßes System dargestellt, das zur Durchführung des erfindungsgemäßen Verfahrens ausgebildet ist.The Invention will be described below with reference to an embodiment described in more detail. It is in the single figure shows a system according to the invention, that for carrying out the invention Method is formed.

Das System 10 ist zum automatischen Auffinden von elektronischen Bildern in einer Datensammlung ausgebildet, wobei die Datensammlung in Form des Internets 40 vorliegt. Die Datensammlung verfügt über eine Anzahl von Datensätzen in Form von Internetseiten. In der Figur sind zur Erläuterung des Prinzips zwei Internetseiten 41 und 45 dargestellt, wobei jede Internetseite über elektronische Bilder 42, 46, erläuternde Textinformationen 43, 47 sowie Adressdaten 44, 48 in Form von Internetadressen verfügt. Eine zweite Komponente des Systems 10 wird durch eine Analyseeinrichtung 30 gebildet. Eine dritte Komponente des Systems 10 wird durch ein Endgerät 20 gebildet, welches einem Nutzer des Systems 10 zugeordnet ist. Erfindungsgemäß kann eine Vielzahl solcher Endgeräte 20 vorgesehen sein. Die Endgeräte können als digitale Kamera, als Mobiltelefon mit Kamerafunktion, oder dergleichen ausgebildet sein.The system 10 is designed to automatically find electronic images in a data collection, the data collection in the form of the Internet 40 is present. The data collection has a number of records in the form of websites. In the figure are to explain the principle two websites 41 and 45 shown, each website using electronic images 42 . 46 , explanatory text information 43 . 47 as well as address data 44 . 48 in the form of Internet addresses. A second component of the system 10 is through an analysis facility 30 educated. A third component of the system 10 is through a terminal 20 formed, which is a user of the system 10 assigned. According to the invention, a plurality of such terminals 20 be provided. The terminals may be in the form of a digital camera, a mobile phone with a camera function, or the like.

Über das Endgerät 20 kann der Nutzer ein Suchbild 21 mit das Suchbild ergänzenden Informationen, beispielsweise in Form von Schlagworten oder dergleichen, erzeugen beziehungsweise bereitstellen. Das Suchbild 21 mit den dazugehörigen erläuternden Informationen wird vom Endgerät 20 an die Analyseeinrichtung 30 übertragen, was durch den Pfeil 22 verdeutlicht ist. Das Suchbild 21 und die daugehörigen ergänzenden Informationen werden anschließend in der Analyseeinrichtung 30 bearbeitet.About the terminal 20 the user can create a search image 21 with the search image supplementary information, for example in the form of keywords or like, generate or provide. The search image 21 with the associated explanatory information is provided by the terminal 20 to the analyzer 30 transmit what is indicated by the arrow 22 is clarified. The search image 21 and the pertinent supplemental information will then be in the analyzer 30 processed.

Über eine Suchmaschine werden von der Analyseeinrichtung 30 im Internet 40 zu den beschreibenden Angaben des Suchbilds 21 passende Bilder gesucht, die sich auf den Internetseiten 41, 45 befinden. Dazu kommuniziert die Analyseeinrichtung 30 mit dem Internet 40, was durch den Pfeil 50 symbolisiert ist. Nun werden alle auf den Internetseiten 41, 45 gefundenen Bilder mit dem Suchbild 21 verglichen. Diejenigen Bilder, deren Übereinstimmungsgrad mit dem Suchbild 21 unter einem vorgegebenen Schwellenwert liegt, werden verworfen. Diejenigen Bilder der Internetseiten 41, 45, deren Übereinstimmungsgrad mit dem Suchbild 21 oberhalb eines vorgegeben Schwellenwert liegt, werden in einer Resultatsdatei 31 abgelegt. Im dargestellten Beispiel umfasst die Resultatsdatei 31 drei Bilder 42, 46 und 32.About a search engine are from the analysis device 30 on the Internet 40 to the descriptive information of the search image 21 looking for suitable pictures, which are on the Internet pages 41 . 45 are located. For this purpose, the analysis device communicates 30 with the Internet 40 , what by the arrow 50 is symbolized. Now everyone on the websites 41 . 45 found images with the search image 21 compared. The images whose degree of agreement with the search image 21 below a predetermined threshold are discarded. Those pictures of the internet pages 41 . 45 whose degree of agreement with the search image 21 above a given threshold, will be in a results file 31 stored. In the example shown, the results file includes 31 three pictures 42 . 46 and 32 ,

Die Bilder der Resultatsdatei 31 werden nun einem weiteren Analyseschritt unterworfen. Dazu werden die zu den Bildern der Resultatsdatei 31 gehörenden Internetseiten nach deren Inhalten analysiert. Die Analyse erfolgt vorteilhaft nach einstellbaren Analyseparametern.The pictures of the result file 31 are now subjected to a further analysis step. These are the images of the results file 31 associated websites are analyzed for their content. The analysis is advantageously carried out according to adjustable analysis parameters.

Basierend auf den Analyseergebnissen wird eine Ergebnisdatei 33 erzeugt, beinhaltend die übrigbleibenden Bilder 42 und 46 sowie die dazugehörigen Internetadressen 44, 48 derjenigen Internetseiten, auf den sich die Bilder 42, 46 befinden. Die Ergebnisdatei 33 wird schließlich von der Analyseeinrichtung 30 an das Endgerät 20 des Nutzers übertragen, was durch den Pfeil 34 verdeutlicht ist. Der Nutzer kann nun die jeweiligen Internetseiten 41, 45 aufrufen, um diese genauer zu untersuchen.Based on the analysis results becomes a result file 33 generated, containing the remaining images 42 and 46 as well as the associated internet addresses 44 . 48 those internet sites where the pictures look 42 . 46 are located. The result file 33 will finally come from the analyzer 30 to the terminal 20 the user transmitted what by the arrow 34 is clarified. The user can now access the respective websites 41 . 45 to examine them more closely.

1010
Systemsystem
2020
Einem Nutzer zugeordnetes Endgeräta User assigned terminal
2121
Elektronisches Suchbild (und diese ergänzende Informationen)electronic Search image (and this supplemental information)
2222
Übertragungswegtransmission path
3030
Analyseeinrichtunganalyzer
3131
Resultatsdateiresult file
3232
Elektronisches Bildelectronic image
3333
ErgebnisdateiResults file
3434
Übertragungswegtransmission path
4040
Datensammlung (Internet)data collection (Internet)
4141
Datensatz (Internetseite)record (Website)
4242
Elektronisches Bildelectronic image
4343
Textinformationtext information
4444
Adressinformation (Internetadresse)address information (Internet address)
4545
Datensatz (Internetseite)record (Website)
4646
Elektronisches Bildelectronic image
4747
Textinformationtext information
4848
Adressinformation (Internetadresse)address information (Internet address)
5050
Kommunikationsverbindung Analyseeinrichtung – Datensammlungcommunication link Analyzer - Data Collection

ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDE IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list The documents listed by the applicant have been automated generated and is solely for better information recorded by the reader. The list is not part of the German Patent or utility model application. The DPMA takes over no liability for any errors or omissions.

Zitierte PatentliteraturCited patent literature

  • - DE 10245900 A1 [0005] DE 10245900 A1 [0005]

Claims (17)

Verfahren zum automatischen Auffinden von elektronischen Bildern in einer Datensammlung (40), wobei die Datensammlung (40) eine Mehrzahl von Datensätzen (41; 45) aufweist, die jeweils zumindest ein elektronisches Bild (42; 46) aufweisen, gekennzeichnet durch folgende Schritte: ein elektronisches Suchbild (21) und auf das elektronische Suchbild (21) bezogene ergänzende Informationen werden in einer Analyseeinrichtung (30) bereitgestellt; über ein automatisches Suchverfahren werden mittels der Analyseeinrichtung (30) anhand der das elektronische Suchbild (21) ergänzenden Informationen zu den ergänzenden Informationen in Bezug stehende elektronische Bilder (42; 46; 32) in den Datensätzen (41; 45) der Datensammlung (40) gesucht; das elektronische Suchbild (21) wird in der Analyseeinrichtung (30) mittels einer ersten Bildanalysemethode analysiert; das Ergebnis des analysierten elektronischen Suchbilds (21) wird in der Analyseeinrichtung (30) mittels einer zweiten Bildanalysemethode mit den zu den ergänzenden Informationen in Bezug stehenden elektronischen Bildern (42; 46; 32) verglichen; diejenigen zu den ergänzenden Informationen in Bezug stehenden elektronischen Bilder (42; 46; 32) der Datensätze (41; 45), deren Übereinstimmungsgrad mit dem elektronischen Suchbild (21) einen vorgegebenen Schwellwert übersteigt, werden in einer Resultatsdatei (31) abgelegt.Method for automatically finding electronic images in a data collection ( 40 ), whereby the data collection ( 40 ) a plurality of data records ( 41 ; 45 ) each having at least one electronic image ( 42 ; 46 ), characterized by the following steps: an electronic search image ( 21 ) and the electronic search image ( 21 complementary information is stored in an analysis facility ( 30 ) provided; An automatic search procedure uses the analysis device ( 30 ) using the electronic search image ( 21 ) supplementary information related to the supplementary information related electronic images ( 42 ; 46 ; 32 ) in the datasets ( 41 ; 45 ) of the data collection ( 40 ) searched; the electronic search image ( 21 ) is displayed in the analyzer ( 30 ) analyzed by a first image analysis method; the result of the analyzed electronic search image ( 21 ) is displayed in the analyzer ( 30 ) by means of a second image analysis method with the electronic images related to the supplementary information ( 42 ; 46 ; 32 ) compared; those related to the supplementary information related electronic images ( 42 ; 46 ; 32 ) of the data records ( 41 ; 45 ), their degree of agreement with the electronic search image ( 21 ) exceeds a predetermined threshold, are stored in a result file ( 31 ) filed. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass die Datensätze (41; 45) jeweils zumindest ein elektronisches Bild (42; 46) sowie das elektronische Bild (42; 46) ergänzende Informationen (43, 44; 47, 48) aufweisen.Method according to Claim 1, characterized in that the data records ( 41 ; 45 ) at least one electronic image ( 42 ; 46 ) as well as the electronic image ( 42 ; 46 ) additional information ( 43 . 44 ; 47 . 48 ) exhibit. Verfahren nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass dieses zum automatischen Auffinden von elektronischen Bildern (42; 46) in einer Datensammlung (40) ausgebildet ist, die in Form eines Datennetzes, insbesondere als das Internet, ausgebildet ist.Method according to claim 1 or 2, characterized in that it is used for automatically finding electronic images ( 42 ; 46 ) in a data collection ( 40 ) is formed, which is in the form of a data network, in particular as the Internet, is formed. Verfahren nach Anspruch 3, dadurch gekennzeichnet, dass die Datensätze (41; 45) der Datensammlung (40) als Internetseiten ausgebildet sind.Method according to claim 3, characterized in that the data records ( 41 ; 45 ) of the data collection ( 40 ) are designed as websites. Verfahren nach einem der Ansprüche 1 bis 4, dadurch gekennzeichnet, dass die das wenigstens eine elektronische Bild (42; 46) der Datensätze (41; 45) ergänzenden Informationen in Form von Textinformationen (43; 47) und/oder Adressinformationen (44; 48) ausgebildet sind.Method according to one of claims 1 to 4, characterized in that the at least one electronic image ( 42 ; 46 ) of the data records ( 41 ; 45 ) supplementary information in the form of textual information ( 43 ; 47 ) and / or address information ( 44 ; 48 ) are formed. Verfahren nach einem der Ansprüche 1 bis 5, dadurch gekennzeichnet, dass die in der Resultatsdatei (31) abgelegten elektronischen Bilder (42; 46; 32) von der Analyseeinrichtung (30) als Ergebnisdatei bereitgestellt werden.Method according to one of claims 1 to 5, characterized in that in the results file ( 31 ) stored electronic images ( 42 ; 46 ; 32 ) from the analyzer ( 30 ) as a result file. Verfahren nach einem der Ansprüche 1 bis 6, dadurch gekennzeichnet, dass die in der Resultatsdatei (31) abgelegten elektronischen Bilder (42; 46; 32) einem weiteren Analyseschritt unterworfen werden, bei dem die die elektronischen Bilder (42; 46) ergänzenden Informationen (43, 44; 47, 48) anhand vorgegebener, insbesondere einstellbarer, Analyseparameter analysiert werden, bei dem mit den Analyseparametern in Bezug stehende ergänzende Informationen (44; 48) zu den elektronischen Bildern (42; 46) aus den Datensätzen (41; 45) extrahiert werden und bei dem von der Analyseeinrichtung (30) eine Ergebnisdatei (33) bereitgestellt wird, die zumindest eine Teilmenge der in der Resultatsdatei (31) abgelegten elektronischen Bilder (42; 46) und ergänzend dazu extrahierte ergänzende Informationen (44; 48) aufweist.Method according to one of claims 1 to 6, characterized in that in the results file ( 31 ) stored electronic images ( 42 ; 46 ; 32 ) are subjected to a further analysis step in which the electronic images ( 42 ; 46 ) supplementary information ( 43 . 44 ; 47 . 48 ) are analyzed on the basis of predetermined, in particular adjustable, analysis parameters, in the supplementary information related to the analysis parameters ( 44 ; 48 ) to the electronic images ( 42 ; 46 ) from the data records ( 41 ; 45 ) and by the analyzer ( 30 ) a result file ( 33 ) that contains at least a subset of the in the result file ( 31 ) stored electronic images ( 42 ; 46 ) and supplementary information ( 44 ; 48 ) having. Verfahren nach einem der Ansprüche 1 bis 7, dadurch gekennzeichnet, dass ein elektronisches Suchbild (21) und auf das elektronische Suchbild bezogene ergänzende Informationen der Analyseeinrichtung (30) bereitgestellt werden, in dem das Suchbild und die ergänzenden Informationen in der Analyseeinrichtung abgelegt sind und aktiviert werden und/oder indem das Suchbild und die ergänzenden Informationen von der Analyseeinrichtung ermittelt werden und/oder indem das Suchbild (21) und die ergänzenden Informationen von der Analyseeinrichtung (30) über ein zur Analyseeinrichtung (30) externes Endgerät auf die Analyseeinrichtung (30) übertragen (22) werden.Method according to one of claims 1 to 7, characterized in that an electronic search image ( 21 ) and supplementary information of the analysis facility ( 30 ) are provided, in which the search image and the supplementary information are stored in the analysis device and activated and / or by the search image and the supplementary information are determined by the analysis device and / or by the search image ( 21 ) and the supplementary information from the analyzer ( 30 ) via an analyzer ( 30 ) external terminal to the analyzer ( 30 ) transfer ( 22 ) become. Verfahren nach einem der Ansprüche 1 bis 8, dadurch gekennzeichnet, dass die von der Analyseeinrichtung (30) bereitgestellte Ergebnisdatei (33) von der Analyseeinrichtung (30) auf ein externes Endgerät (20) übertragen (34) wird.Method according to one of claims 1 to 8, characterized in that the of the analysis device ( 30 ) provided result file ( 33 ) from the analyzer ( 30 ) to an external terminal ( 20 ) transfer ( 34 ) becomes. System (10) zum automatischen Auffinden von elektronischen Bildern in einer Datensammlung (40), wobei die Datensammlung (40) eine Mehrzahl von Datensätzen (41; 45) aufweist die jeweils zumindest ein elektronisches Bild (42; 46) aufweisen, gekennzeichnet durch eine Analyseeinrichtung (30), aufweisend eine Einrichtung zum Bereitstellen eines elektronischen Suchbilds (21) und auf das elektronische Suchbild (21) bezogene ergänzende Informationen, eine Sucheinrichtung zum automatischen Suchen von zu den ergänzenden Informationen des Suchbilds in Bezug stehenden elektronischen Bildern (42; 46) in den Datensätzen (41; 45) der Datensammlung (40) anhand der das elektronische Suchbild (21) ergänzenden Informationen, eine Einrichtung zur Bildanalyse des elektronischen Suchbilds (21), eine Vergleichseinrichtung, die ausgebildet ist, um das Ergebnis des analysierten elektronischen Suchbilds (21) mittels einer Bildanalysemethode mit den zu den ergänzenden Informationen des Suchbildes (21) in Bezug stehenden elektronischen Bildern (42; 46) zu vergleichen, und eine Einrichtung zum Ablegen einer Resultatsdatei (31), in der diejenigen zu den ergänzenden Informationen des Suchbildes (21) in Bezug stehenden elektronischen Bilder (42; 46; 32) der Datensätze (41; 45), deren Übereinstimmungsgrad mit dem elektronischen Suchbild (21) einen vorgegebenen Schwellwert übersteigt, abgelegt sind.System ( 10 ) for automatically finding electronic images in a data collection ( 40 ), whereby the data collection ( 40 ) a plurality of data records ( 41 ; 45 ) each has at least one electronic image ( 42 ; 46 ), characterized by an analysis device ( 30 ), comprising means for providing an electronic search image ( 21 ) and the electronic search image ( 21 complementary information, a search device for automatically searching for related to the supplementary information of the search image electronic images ( 42 ; 46 ) in the datasets ( 41 ; 45 ) of the data collection ( 40 ) using the electronic search image ( 21 ) supplementary information, an image analysis device for the electronic search image ( 21 ), a comparison device which is designed to determine the result of the analyzed electronic search image ( 21 ) by means of an image analysis method with the additional information of the search image ( 21 ) related electronic images ( 42 ; 46 ) too compare and a facility to store a result file ( 31 ), in which those to the supplementary information of the search image ( 21 ) related electronic images ( 42 ; 46 ; 32 ) of the data records ( 41 ; 45 ), their degree of agreement with the electronic search image ( 21 ) exceeds a predetermined threshold, are stored. System nach Anspruch 10, dadurch gekennzeichnet, dass die Datensätze (41; 45) jeweils zumindest ein elektronisches Bild (42; 46) sowie das elektronische Bild (42; 46) ergänzende Informationen (43, 44; 47, 48) aufweisen.System according to claim 10, characterized in that the data records ( 41 ; 45 ) at least one electronic image ( 42 ; 46 ) as well as the electronic image ( 42 ; 46 ) additional information ( 43 . 44 ; 47 . 48 ) exhibit. System nach Anspruch 10 oder 11, dadurch gekennzeichnet, dass dieses zum automatischen Auffinden von elektronischen Bildern (42; 46) in einer Datensammlung (40) ausgebildet ist, die in Form eines Datennetzes, insbesondere als das Internet, ausgebildet ist.System according to claim 10 or 11, characterized in that it is used for automatically finding electronic images ( 42 ; 46 ) in a data collection ( 40 ) is formed, which is in the form of a data network, in particular as the Internet, is formed. System nach Anspruch 12, dadurch gekennzeichnet, dass die Datensätze (41; 45) der Datensammlung (40) als Internetseiten ausgebildet sind.System according to claim 12, characterized in that the data records ( 41 ; 45 ) of the data collection ( 40 ) are designed as websites. System nach einem der Ansprüche 10 bis 13, dadurch gekennzeichnet, dass die das wenigstens eine elektronische Bild (42; 46) eines Datensatzes (41; 45) ergänzenden Informationen in Form von Textinformationen (43; 47) und/oder Adressinformationen (44; 48) ausgebildet sind.System according to one of claims 10 to 13, characterized in that the at least one electronic image ( 42 ; 46 ) of a data record ( 41 ; 45 ) supplementary information in the form of textual information ( 43 ; 47 ) and / or address information ( 44 ; 48 ) are formed. System nach einem der Ansprüche 10 bis 14, dadurch gekennzeichnet, dass eine Einrichtung zum Erzeugen einer Ergebnisdatei (33) aus der Resultatsdatei (31) vorgesehen ist.System according to one of claims 10 to 14, characterized in that means for generating a result file ( 33 ) from the results file ( 31 ) is provided. System nach einem der Ansprüche 10 bis 15, dadurch gekennzeichnet, dass die Analyseeinrichtung (30) eine Einrichtung zur Durchführung eines weiteren Analyseschritts aufweist, die zur Analyse von die elektronischen Bilder (42; 46) ergänzenden Informationen (43, 44; 47, 48) anhand vorgegebener, insbesondere einstellbarer, Analyseparameter ausgebildet ist, dass die Analyseeinrichtung (30) eine Extraktionseinrichtung zum Extrahieren von mit den Analyseparametern in Bezug stehenden ergänzenden Informationen (44; 48) zu den elektronischen Bildern (42; 46) aufweist, und dass die Analyseeinrichtung (30) eine Einrichtung zum Erzeugen einer Ergebnisdatei aufweist, welche zur Erzeugung einer Ergebnisdatei (33) aus zumindest einer Teilmenge der in der Resultatsdatei (31) abgelegten elektronischen Bilder (42; 46) und ergänzend dazu extrahierter ergänzender Informationen (44; 48) ausgebildet ist.System according to one of claims 10 to 15, characterized in that the analysis device ( 30 ) comprises means for performing a further analysis step for analyzing the electronic images ( 42 ; 46 ) supplementary information ( 43 . 44 ; 47 . 48 ) is formed on the basis of predetermined, in particular adjustable, analysis parameters such that the analysis device ( 30 ) extraction means for extracting supplementary information related to the analysis parameters ( 44 ; 48 ) to the electronic images ( 42 ; 46 ), and that the analysis device ( 30 ) comprises means for generating a result file which is used to generate a result file ( 33 ) from at least a subset of the in the result file ( 31 ) stored electronic images ( 42 ; 46 ) and supplementary information ( 44 ; 48 ) is trained. System nach einem der Ansprüche 10 bis 16, bei dem der Analyseeinrichtung (30) ein elektronisches Suchbild (21) und auf das elektronische Suchbild bezogene ergänzende Informationen bereitgestellt werden, dadurch gekennzeichnet, dass die Analyseeinrichtung (30) eine Einrichtung, in der das Suchbild und die ergänzenden Informationen in der Analyseeinrichtung abgelegt sind, sowie Mittel zum Aktivieren des Suchbilds und der ergänzenden Informationen aufweist und/oder dass die Analyseeinrichtung eine Einrichtung zum Ermitteln des Suchbilds und der ergänzenden Informationen aufweist und/oder dass die Analyseeinrichtung (30) eine Schnittstelle zu wenigstens einem externen Endgerät (20) aufweist, die zum Empfangen (22) eines Suchbilds (21) und der das Suchbild ergänzenden Informationen von einem externen Endgerät (20) und/oder zum Übertragen (34) einer Ergebnisdatei (33) zu einem externen Endgerät (20) ausgebildet ist.System according to one of Claims 10 to 16, in which the analysis device ( 30 ) an electronic search image ( 21 ) and supplementary information relating to the electronic search image, characterized in that the analysis device ( 30 ) a device, in which the search image and the supplementary information are stored in the analysis device, as well as means for activating the search image and the supplementary information and / or that the analysis device has a device for determining the search image and the supplementary information and / or that the analyzer ( 30 ) an interface to at least one external terminal ( 20 ) for receiving ( 22 ) of a search image ( 21 ) and the information supplementing the search image from an external terminal ( 20 ) and / or for transmission ( 34 ) of a result file ( 33 ) to an external terminal ( 20 ) is trained.
DE102009007715A 2009-02-05 2009-02-05 Method and system for automatically finding electronic images in a data collection Active DE102009007715B4 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE102009007715A DE102009007715B4 (en) 2009-02-05 2009-02-05 Method and system for automatically finding electronic images in a data collection

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102009007715A DE102009007715B4 (en) 2009-02-05 2009-02-05 Method and system for automatically finding electronic images in a data collection

Publications (2)

Publication Number Publication Date
DE102009007715A1 true DE102009007715A1 (en) 2010-08-19
DE102009007715B4 DE102009007715B4 (en) 2011-04-07

Family

ID=42338530

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102009007715A Active DE102009007715B4 (en) 2009-02-05 2009-02-05 Method and system for automatically finding electronic images in a data collection

Country Status (1)

Country Link
DE (1) DE102009007715B4 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0866409B1 (en) * 1997-03-19 2003-01-02 Canon Kabushiki Kaisha Image retrieval apparatus and method
DE10245900A1 (en) 2002-09-30 2004-04-08 Neven jun., Hartmut, Prof.Dr. Image based query system for search engines or databases of mobile telephone, portable computer uses image recognition to access more information about objects in image
EP0657831B1 (en) * 1993-12-09 2005-05-11 Canon Kabushiki Kaisha Image retrieving method and apparatus
EP0713186B1 (en) * 1994-11-15 2006-07-05 Canon Kabushiki Kaisha Method and apparatus for retrieving images from a database
EP1202187B1 (en) * 2000-10-30 2007-08-01 Microsoft Corporation Image retrieval system and methods with semantic and feature based relevance feedback

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2006030509A1 (en) * 2004-09-16 2008-05-08 富士通株式会社 Image search device, image search method, image creation device, image creation method, and program

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0657831B1 (en) * 1993-12-09 2005-05-11 Canon Kabushiki Kaisha Image retrieving method and apparatus
EP0713186B1 (en) * 1994-11-15 2006-07-05 Canon Kabushiki Kaisha Method and apparatus for retrieving images from a database
EP0866409B1 (en) * 1997-03-19 2003-01-02 Canon Kabushiki Kaisha Image retrieval apparatus and method
EP1202187B1 (en) * 2000-10-30 2007-08-01 Microsoft Corporation Image retrieval system and methods with semantic and feature based relevance feedback
DE10245900A1 (en) 2002-09-30 2004-04-08 Neven jun., Hartmut, Prof.Dr. Image based query system for search engines or databases of mobile telephone, portable computer uses image recognition to access more information about objects in image

Also Published As

Publication number Publication date
DE102009007715B4 (en) 2011-04-07

Similar Documents

Publication Publication Date Title
DE10300545B4 (en) Device, method, storage medium and data structure for the identification and storage of data
DE69909435T2 (en) IMAGING SECURITY INFORMATION IN A USEFUL FORMAT
DE112014000408B4 (en) Safe storage and access to digital artifacts
DE102017005963A1 (en) Providing relevant video scenes in response to a video search query
DE112016005555T5 (en) CAPTCHA image-based tasks
DE102006011294A1 (en) Method and communication system for the computer-aided finding and identification of copyrighted content
DE102019109288A1 (en) System and method for analysis of the imported video
DE102004026083A1 (en) Server based linking of information e.g. for finding information on internet, has functional unit having content signature unit, to form document section and or file content which are embedded in electronic document.
DE102012218966A1 (en) Method and system for identifying original data generated by things in the Internet of Things
DE102017125463A1 (en) USING MASCHINELLE LEARNING TO DETECT AN IMAGE COMPONENT IN A COMPOSITE IMAGE
DE112020000004T5 (en) Information delivery system and information delivery process
DE202008018638U1 (en) Generic format for the efficient transmission of data
DE112011100196B4 (en) Method, apparatus and computer program product for verifying secure data
DE102012222036A1 (en) Personalizing Internet search content based on targeted data derived user data
DE102015008874A1 (en) Data of complement documents for web services on the Internet.
CH712988B1 (en) A method of searching data to prevent data loss.
Almishari et al. Ads-portal domains: Identification and measurements
DE102009007715B4 (en) Method and system for automatically finding electronic images in a data collection
CN104899320A (en) Webpage repair method, terminal, server and system
DE202022102520U1 (en) System for analyzing advertising on online video platforms for digital marketing through machine learning to reach wide audiences
WO2011044865A1 (en) Method for determining a similarity of objects
DE102012218268A1 (en) Manage digital signatures
WO2021190715A1 (en) Computer-implemented method and distributed storage system for providing reliable data objects
DE10108564A1 (en) Method for searching for data currently or previously stored in a distributed system or data containing data, taking into account the time of their availability
EP2017758A1 (en) Computer-assisted system and computer-assisted method for content verification

Legal Events

Date Code Title Description
OM8 Search report available as to paragraph 43 lit. 1 sentence 1 patent law
OP8 Request for examination as to paragraph 44 patent law
R020 Patent grant now final
R020 Patent grant now final

Effective date: 20110823

R082 Change of representative

Representative=s name: MUELLER, THOMAS, DIPL.-ING., DE