DE102009007715A1 - Method for automatically finding electronic images in Internet, involves storing electronic images of data sets in result file, where correlation degree of electronic images with electronic search image exceeds preset threshold - Google Patents
Method for automatically finding electronic images in Internet, involves storing electronic images of data sets in result file, where correlation degree of electronic images with electronic search image exceeds preset threshold Download PDFInfo
- Publication number
- DE102009007715A1 DE102009007715A1 DE102009007715A DE102009007715A DE102009007715A1 DE 102009007715 A1 DE102009007715 A1 DE 102009007715A1 DE 102009007715 A DE102009007715 A DE 102009007715A DE 102009007715 A DE102009007715 A DE 102009007715A DE 102009007715 A1 DE102009007715 A1 DE 102009007715A1
- Authority
- DE
- Germany
- Prior art keywords
- electronic
- image
- search image
- supplementary information
- images
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
Abstract
Description
Die vorliegende Erfindung betrifft ein Verfahren sowie ein System zum automatischen Auffinden von elektronischen Bildern in einer Datensammlung, wobei die Datensammlung eine Mehrzahl von Datensätzen aufweist, die jeweils zumindest ein elektronisches Bild, optional auch das elektronische Bild ergänzende Informationen, aufweisen.The The present invention relates to a method and a system for automatic retrieval of electronic images in a data collection, wherein the data collection has a plurality of data records, the at least one electronic image, optionally also the electronic image supplementary information.
Die einfache, internationale Verbreitung von Bildmaterial im Internet hat das Bedürfnis erweckt, nach Bildern im Internet suchen zu können.The simple, international distribution of images on the Internet has aroused the need to search for pictures on the Internet to be able to.
Auf dem Gebiet der automatischen Analyse digitaler Bilder ist mittlerweile eine große Bandbreite unterschiedlicher Verfahren und Möglichkeiten bekannt geworden. Mit der zunehmenden Verbreitung der digitalen Fotografie beispielsweise ergeben sich immer neue Möglichkeiten, digitale Bilder in Kommunikationsnetzen zu übertragen und aufgrund der analysierten Inhalte der Bilder immer neue Anwendungen zu erzeugen.On the field of automatic analysis of digital images is now a wide range of different procedures and options known. With the proliferation of digital Photography, for example, there are always new possibilities to transmit digital images in communication networks and due to the analyzed contents of the images always new applications to create.
Ein grundlegendes Merkmal hierbei ist, dass die Inhalte der digitalen Bilder analysiert werden können. Dies geschieht in der Regel mittels geeigneter Bildanalyseverfahren, die auf entsprechenden Rechnereinheiten implementiert sind und die die Inhalte der digitalen Bilder, vorzugsweise automatisch, analysieren.One basic feature here is that the contents of the digital Images can be analyzed. This happens in the Usually by means of suitable image analysis methods, which are based on appropriate Computer units are implemented and the contents of the digital Analyze images, preferably automatically.
Ein
Anwendungsbeispiel für den Einsatz derartiger Bildanalyseverfahren
ist etwa die bildbasierte Suche oder Anfrage. Eine solche Lösung
ist beispielsweise in der
Es sind aber auch Lösungen bekannt, bei denen Bilder als Suchanfrage in ein System eingegeben werden und bei denen dann eine Datenbank mit vielen Referenzbildern nach einem ähnlichen oder gleichen Bild durchsucht wird. Die Treffer werden als Liste mit den passenden Referenzbildern ausgegeben. Der Nutzer sendet in einem solchen Fall ein Bild als Suchanfrage an eine Rechnereinheit. Das System zur bildbasierten Suche vergleicht nun das eingesendete Bild mit Referenzbildern in einer Datenbank. Die passenden Referenzbilder werden zu einer Trefferliste zusammengefasst.It But there are also known solutions where images as a query be entered into a system and then where a database with many reference pictures after a similar or same Image is searched. The hits are as a list with the appropriate ones Reference pictures output. The user sends in such a case an image as a query to a computer unit. The system for Image-based search now compares the submitted image with reference images in a database. The matching reference pictures become a hit list summarized.
Es gibt aber auch eine andere Art der Bildsuche mit Hilfe von Suchmaschinen im Internet. Hier wird ein Begriff in Form einer Textinformation eingegeben, welcher dann Bilder als Antwort liefert. Es kann eine Beschreibung des Bildes als Suchbegriff verwendet werden, und die Bilder der Datenbank, die in der Regel mit als „Tags” bezeichneten Zusatzinformationen in Form von Schlagworten verknüpft sind, werden mit den Suchbegriffen verglichen. Die passenden Referenzbilder werden dann als Trefferliste zusammengefasst.It But there is also another type of image search with the help of search engines on the Internet. Here is a term in the form of text information input, which then delivers images as an answer. It can be one Description of the image can be used as a search term, and the Images of the database, usually referred to as "tags" Additional information linked in the form of keywords are compared with the search terms. The matching reference pictures are then summarized as a hit list.
Die einfache, internationale Verbreitung von Bildmaterial im Internet macht es zunehmend schwer, die Einhaltung von Rechten an Bildern, beispielsweise an Urheberrechten, zu kontrollieren. Es besteht deshalb das Bedürfnis, nach Bildern oder Bildern von geschützten Produkten selbst im Internet suchen zu können, um deren missbräuchliche Verwendung festzustellen und gegebenenfalls zu verfolgen. Dabei muss aber gewährleistet sein, dass die exakte Kopie eines Bildes, oder eine ähnliche Abbildung eines bestimmten Produktes gefunden wird.The simple, international distribution of images on the Internet makes it increasingly difficult to comply with rights to images, for example, copyright. It exists therefore the need for images or images of protected To be able to search for products on the internet in order to establish improper use and, where appropriate, to pursue. But it must be ensured that the exact copy of a picture, or a similar picture a particular product is found.
Dazu sind die bekannten Lösungen nicht gut geeignet. Ein Abgleich findet heute manuell statt und ist deshalb kaum vollständig möglich. Andere Ansätze versehen schätzenswerte Bilder mit digitalen Wasserzeichen und prüfen die unerlaubte Verwendung durch Dritte, indem speziell angepasste Suchmaschinen diese Wasserzeichen suchen. Ein rein manueller Abgleich ist zudem aufwändig, personalintensiv, teuer und langsam. Zudem ist eine direkte Antwort „dieses Bild befindet sich auf diesen bestimmten Internetseiten” ist automatisch nicht möglich. Die visuelle Prüfung, welche dieser Bilder Kopien eines bestimmten, zu schützenden Bildes sind, ist somit derzeit kaum machbar. Weiterhin kann die Kennzeichnung geschützter Bilder manipuliert werden, erfordert Verwaltungsaufwand. Die bekannten Lösungen können nur markierte Bilder schützen, die im Internet oder sonst wie elektronisch gespeichert sind, aber weder den Bestand älterer, noch unmarkierter Bilder noch Bilder Dritter von geschützten Gegenständen. Schließlich bieten die bekannten Lösungen auch nicht die Möglichkeit, direkt nach Kopien von Bildern oder nach fremden Abbildungen eigener Produkte suchen zu können.To the known solutions are not well suited. An adjustment takes place manually today and is therefore hardly complete possible. Other approaches provide estimates Pictures with digital watermarks and check the unauthorized Use by third parties, by using specially adapted search engines look for these watermarks. A purely manual adjustment is also time-consuming, labor-intensive, expensive and slow. In addition is a direct answer "this picture is on this certain websites "is not automatically possible. The visual check which of these pictures are copies of a certain image to be protected is thus currently hardly feasible. Furthermore, the marking may be protected Manipulating images requires administrative effort. The known solutions can only protect marked images on the internet or otherwise stored electronically, but neither the stock of older, still unmarked pictures still thirds of protected Objects. Finally, the well-known offer Solutions also do not have the option to go directly after Copies of pictures or foreign pictures of own products to be able to search.
Ausgehend vom genannten Stand der Technik liegt der vorliegenden Erfindung die Aufgabe zugrunde, ein Verfahren und ein System der eingangs genannten Art derart weiterzubilden, dass die geschilderten Nachteile vermieden werden können. Insbesondere sollen ein Verfahren und ein System bereitgestellt werden können, mit dem auf einfache und dennoch zufriedenstellende Weise erreicht werden kann, dass elektronische Bilder in einer Datensammlung gefunden werden können.outgoing Of the cited prior art, the present invention the task is based, a method and a system of the aforementioned Further develop type such that avoided the disadvantages can be. In particular, a method and a System can be provided with the simple and yet satisfactorily can be achieved that electronic images can be found in a data collection.
Diese Aufgabe wird erfindungsgemäß gelöst durch das Verfahren mit den Merkmalen gemäß dem unabhängigen Patentanspruch 1 sowie durch das System mit den Merkmalen gemäß dem unabhängigen Patentanspruch 10. Weitere Merkmale und Details der Erfindung ergeben sich aus den Unteransprüchen, der Beschreibung sowie der Zeichnung. Dabei gelten Merkmale und Details, die im Zusammenhang mit dem Verfahren beschrieben sind, selbstverständlich auch im Zusammenhang mit dem System, und jeweils umgekehrt, so dass hinsichtlich der Offenbarung zu beiden Erfindungsaspekten stets wechselseitig und vollinhaltlich Bezug genommen wird.This object is achieved by the method with the features according to the independent claim 1 and by the system having the features according to independent claim 10. Further features and details of the invention will become apparent from the dependent claims, the description and the drawings. In this case, features and details that are described in connection with the method, of course, also in connection with the system, and in each case vice versa, so that with respect to the disclosure of both aspects of the invention is always reciprocal and full content reference.
Mit der vorliegenden Erfindung kann insbesondere festgestellt werden, ob ein bestimmtes Bild unerlaubt in einer Datensammlung, etwa im Internet, verwendet wurde. Weiterhin kann die Fundstelle identifiziert werden. Durch die vorliegende Erfindung kann insbesondere festgestellt werden, ob Abbildungen Dritter eigener Produkte im Internet oder sonst wo veröffentlicht ist.With In particular, it can be stated in the present invention that whether a particular image is illegal in a data collection, such as in the Internet, was used. Furthermore, the reference can be identified become. In particular, it can be stated by the present invention whether pictures of third party own products on the Internet or where else is published.
Gemäß dem ersten Aspekt der Erfindung wird ein Verfahren zum automatischen Auffinden von elektronischen Bildern in einer Datensammlung, wobei die Datensammlung eine Mehrzahl von Datensätzen aufweist, die jeweils zumindest ein elektronisches Bild aufweisen, bereitgestellt, das gekennzeichnet ist durch folgende Schritte: ein elektronisches Suchbild und auf das elektronische Suchbild bezogene ergänzende Informationen werden in einer Analyseeinrichtung bereitgestellt; über ein automatisches Suchverfahren werden mittels der Analyseeinrichtung anhand der das elektronische Suchbild ergänzenden Informationen zu den ergänzenden Informationen in Bezug stehende elektronische Bilder in den Datensätzen der Datensammlung gesucht, das elektronische Suchbild wird in der Analyseeinrichtung mittels einer ersten Bildanalysemethode analysiert; das Ergebnis des analysierten elektronischen Suchbilds wird in der Analyseeinrichtung mittels einer zweiten Bildanalysemethode mit den zu den ergänzenden Informationen in Bezug stehenden elektronischen Bildern verglichen; diejenigen zu den ergänzenden Informationen in Bezug stehenden elektronischen Bilder der Datensätze, deren Übereinstimmungsgrad mit dem elektronischen Suchbild einen vorgegebenen Schwellwert übersteigt, werden in einer Resultatsdatei abgelegt.According to the The first aspect of the invention is a method for automatic Finding electronic images in a data collection, wherein the data collection has a plurality of data records, each having at least one electronic image, provided, characterized by the following steps: an electronic Search image and related to the electronic search image complementary Information is provided in an analyzer; above an automatic search method will be used by the analyzer on the basis of the electronic search image additional information related to the supplementary information related electronic Images searched in records of data collection, the electronic Search image is in the analysis device by means of a first image analysis method analyzed; the result of the analyzed electronic search image is used in the analysis device by means of a second image analysis method with the information related to the supplementary information compared to electronic pictures; those to the supplementary ones Information related electronic images of the records, their degree of agreement with the electronic search image exceeds a predetermined threshold, are in a Result file filed.
Vorteilhaft können die Datensätze jeweils zumindest ein elektronisches Bild sowie das elektronische Bild ergänzende Informationen aufweisen.Advantageous the records can each have at least one electronic Image as well as the electronic image supplementary information exhibit.
Mit dem erfindungsgemäßen Verfahren wird eine Möglichkeit geschaffen, bestimmte Bilder in einer Datensammlung aufzufinden.With the method according to the invention becomes a possibility created to find certain images in a data collection.
Das erfindungsgemäße Verfahren dient zum automatischen Auffinden von elektronischen Bildern in einer Datensammlung, wobei die Datensammlung eine Mehrzahl von Datensätzen aufweist, die jeweils zumindest ein elektronisches Bild, optional auch das elektronische Bild ergänzende Informationen, aufweisen. Dabei ist die Erfindung nicht auf bestimmte Typen von Datensätzen oder auf eine bestimmte Ausgestaltung der Datensammlung beschränkt. Beispielsweise kann vorgesehen sein, dass die Datensammlung in Form eines Datennetzes, insbesondere als das Internet, als ein Intranet, oder dergleichen ausgebildet ist. Handelt es sich bei der Datensammlung um das Internet, so sind die Datensätze der Datensammlung vorteilhaft als Internetseiten ausgebildet.The inventive method is used for automatic Finding electronic images in a data collection, wherein the data collection has a plurality of data records, each one at least an electronic image, optionally also the electronic Image supplementary information. It is the Invention is not limited to certain types of records or limited to a specific form of data collection. For example, it may be provided that the data collection in the form a data network, especially as the Internet, as an intranet, or the like is formed. Is it the data collection to the Internet, so are the datasets of the data collection advantageous trained as websites.
Ein Datensatz umfasst zunächst wenigstens ein elektronisches Bild, wobei natürlich auch mehrere Bilder pro Datensatz vorhanden sein können. Weiterhin kann der Datensatz vorteilhaft auch noch das wenigstens eine elektronische Bild ergänzende Informationen aufweisen. Auch diese Informationen können auf unterschiedliche Weise ausgebildet sein. Hierbei kann es sich beispielsweise um Textinformationen, Audioinformationen, Adressinformationen, und dergleichen handeln. Vorteilhaft können die das wenigstens eine elektronische Bild der Datensätze ergänzenden Informationen in Form von Textinformationen und/oder Adressinformationen ausgebildet sein. Wenn es sich bei den Datensätzen um Internetseiten handelt, kann es sich bei den Adressdaten vorteilhaft um die Internetadresse der entsprechenden Internetseite, die so genannte URL, handeln.One Record initially comprises at least one electronic Picture, of course, several pictures per record can be present. Furthermore, the data set can be advantageous even the at least one electronic picture complementary Have information. Also this information can be up be formed different ways. This can be for example to text information, audio information, address information, and act like that. Advantageously, the at least an electronic image of the datasets complementary Information in the form of textual information and / or address information be educated. If the records are web pages, it can be advantageous in the address data to the Internet address the corresponding website, the so-called URL.
Zu Beginn des Verfahrens werden ein elektronisches Suchbild und auf das elektronische Suchbild bezogene ergänzende Informationen in einer Analyseeinrichtung bereitgestellt. Dem Verfahren wird somit ein elektronisch gespeichertes Bild übergeben. Zusätzlich werden das Suchbild ergänzende Informationen, beispielsweise beschreibende Stichworte, übergeben. Dabei kann das Verfahren auf unterschiedliche Weise gestartet werden. Einige vorteilhafte, jedoch nicht ausschließliche Beispiele werden im Folgenden näher erläutert.To Start of the procedure will be an electronic search image and on the electronic search image related additional information provided in an analysis device. The method is thus pass an electronically stored image. additionally the search image will be supplemental information, for example descriptive keywords, passed. The process can be be started in different ways. Some advantageous, however, non-exclusive examples are provided below explained in more detail.
Beispielsweise kann vorgesehen sein, dass das Suchbild und die ergänzenden Informationen in der Analyseeinrichtung abgelegt sind und dass diese zu Beginn des Verfahrens aktiviert werden. Alternativ oder zusätzlich kann vorgesehen sein, dass das Suchbild und die ergänzenden Informationen von der Analyseeinrichtung ermittelt werden. Alternativ oder zusätzlich kann auch vorgesehen sein, dass das Suchbild und die ergänzenden Informationen von der Analyseeinrichtung über ein zur Analyseeinrichtung externes Endgerät auf die Analyseeinrichtung übertragen werden.For example can be provided that the search image and the supplementary Information is stored in the analyzer and that these too Start of the procedure to be activated. Alternatively or in addition can be provided that the search image and the supplementary Information to be determined by the analyzer. alternative or additionally, it may also be provided that the search image and the supplemental information from the analyzer via an external device to the analysis device transmitted to the analysis device become.
Beispielsweise kann ein elektronisch gespeichertes Bild an das Verfahren übergeben werden. Es ist aber auch möglich, dass ein Gegenstand oder ein gedrucktes Bild fotografiert und elektronisch gespeichert an das Verfahren gesendet werden. Dies kann beispielsweise mit einer digitalen Fotokamera, einem Mobiltelefon mit einer solchen Kamerafunktion, oder dergleichen erfolgen.For example, an electronically stored image can be transferred to the method. It But it is also possible that an object or a printed image is photographed and electronically stored sent to the process. This can be done for example with a digital still camera, a mobile phone with such a camera function, or the like.
Zusätzlich werden beschreibende Stichworte übergeben. In einer Ausführung der Erfindung können auch Bilder auf der Internetseite eines Auftraggebers extrahiert und – vorzugsweise gesammelt – and das Verfahren übergeben werden. Dabei können Stichworte und beschreibenden Texte, wie beispielsweise Produktnamen, ebenfalls direkt aus der Internetseite gelesen werden.additionally descriptive keywords are passed. In one execution The invention may include images on the website extracted from a client and - preferably collected - and the Procedure to be passed. It can keywords and descriptive texts, such as product names, as well be read directly from the website.
Das Verfahren, beziehungsweise das System kann in regelmäßigen Abständen die Datensammlung, beispielsweise das Internet, durchsuchen und dabei früher identifizierte Fundstellen auch vorrangig bearbeiten.The Procedure, or the system can be in regular Intervals the data collection, for example the Internet, search and find previously identified sites also prioritize.
Nach Bereitstellung des Suchbildes und der dazu ergänzenden Informationen wird über ein automatisches Suchverfahren mittels der Analyseeinrichtung anhand der das elektronische Suchbild ergänzenden Informationen zu den ergänzenden Informationen in Bezug stehende elektronische Bilder in den Datensätzen der Datensammlung gesucht. Wenn die Datensammlung als Internet und die Datensätze als Internetseiten ausgebildet sind, können die das Suchbild ergänzenden Informationen in eine Suchmaschine eingegeben und darauf basierend zu den ergänzenden Informationen in Bezug stehende, das heißt „passende” Bilder in den einzelnen Datensätzen der Datensammlung gesucht und gefunden werden. Zu jedem zu prüfenden Suchbild gibt es nun eine Anzahl von Suchbegriffen, nämlich die ergänzenden Informationen, die in eine Suchmaschine herkömmlicher Technik eingegeben werden können. Handelt es sich bei der Datensammlung um das Internet, können so alle Bilder weltweit geliefert werden, die die Suchkriterien erfüllen.To Provision of the search image and the complementary Information is provided through an automatic search procedure by means of the analysis device on the basis of the electronic search image additional information about the supplementary information related electronic images in the datasets the data collection searched. If the data collection as Internet and the records are designed as websites the information that supplements the search image in a search engine entered and based on the additional information related, that is "fitting" images searched in the individual datasets of the data collection and be found. For each search image to be reviewed There are now a number of search terms, namely the supplementary Information in a search engine of conventional technology can be entered. Is it the data collection around the internet, so all the pictures can be delivered worldwide who meet the search criteria.
Zusätzlich wird auch das elektronische Suchbild in der Analyseeinrichtung mittels einer Bildanalysemethode analysiert. Das Suchbild wird somit zusätzlich als Referenz einem Verfahren zur Bilderkennung und Bildanalyse unterworfen.additionally Also, the electronic search image in the analysis device by means of an image analysis method. The search image is thus additional as a reference subjected to a method for image recognition and image analysis.
Das analysierte elektronische Suchbild wird dann in der Analyseeinrichtung mittels einer Bildanalysemethode mit den zu den ergänzenden Informationen in Bezug stehenden elektronischen Bildern verglichen. Sowohl das Suchbild, als auch die gefundenen Bilder werden allesamt in die Bilderkennung und Bildanalyse gegeben und miteinander verglichen.The analyzed electronic search image is then in the analysis device by means of an image analysis method with those to the complementary ones Information compared in relation to electronic images. Both the search image and the images found are all given in the image recognition and image analysis and compared with each other.
Die vorliegende Erfindung ist nicht auf bestimmte Bildanalysemethoden beschräkt. Beispielsweise kann die Bildanalyse nach der ViPR-Methode (Visual Pattern Recognition), unter Verwendung des so genannten SIFT-Algorithmus, oder dergleichen erfolgen. Je nach Ausgestaltung können die erste und zweite Bildanalysemethode unterschiedlich ausgebildet sein. Natürlich ist auch denkbar, dass die Bildanalysen mit nur einer einzigen, einheitlichen Bildanalysemethode durchgeführt werden.The The present invention is not limited to particular image analysis methods beschräkt. For example, the image analysis after the ViPR (Visual Pattern Recognition) method, using the so-called SIFT algorithm mentioned, or the like. Depending on the design The first and second image analysis methods can be different be educated. Of course, it is also conceivable that the Image analysis with a single, unified image analysis method be performed.
Diejenigen zu den ergänzenden Informationen in Bezug stehenden elektronischen Bilder der Datensätze, deren Übereinstimmungsgrad mit dem elektronischen Suchbild einen vorgegebenen Schwellwert übersteigt, werden in einer Resultatsdatei abgelegt, bei der es sich um eine Art Zwischenergebnis handeln kann.Those related to the supplementary information related electronic Pictures of the records, their degree of agreement with the electronic search image exceeds a predetermined threshold, are stored in a results file, which is a Type intermediate result can act.
Über den Schwellenwert kann bestimmt werden, wie groß der Umfang der tatsächlich relevanten Bilder ist. Insbesondere kann vorteilhaft sein, wenn der Grad der Übereinstimmung zweier Bilder, der durch den Schwellenwert definiert wird, einstellbar gestaltet ist. Auf diese Weise können auch zu dem Suchbild nur ähnliche Bilder erfasst werden. Dies können beispielsweise Fotos eines Produktes sein, welche ein Dritter angefertigt hat, die aber ein geschütztes Produkt zeigen. Die Ähnlichkeit mit den eigenen Bildern des Produktes, den Suchbildern, ist Maß für die Entscheidung zur weiteren Verarbeitung.about the threshold can be determined by how large the scope which is actually relevant pictures. In particular, can be advantageous if the degree of agreement of two Images defined by the threshold are made adjustable is. In this way, only similar to the search image Pictures are captured. This can be photos, for example a product made by a third party, but show a protected product. The similarity with the own pictures of the product, the search pictures, is measure for the decision for further processing.
Mit der Resultatsdatei kann dann auf unterschiedliche Weise weiter fortgefahren werden.With the result file can then continue in different ways become.
Beispielsweise können die in der Resultatsdatei abgelegten elektronischen Bilder von der Analyseeinrichtung als Ergebnisdatei bereitgestellt werden.For example can be stored in the results file electronic Images provided by the analyzer as a result file become.
Vorteilhaft können die in der Resultatsdatei abgelegten elektronischen Bilder einem weiteren Analyseschritt unterworfen werden, bei dem die die elektronischen Bilder ergänzenden Informationen anhand vorgegebener, insbesondere einstellbarer, Analyseparameter analysiert werden, bei dem mit den Analyseparametern in Bezug stehende ergänzende Informationen zu den elektronischen Bildern aus den Datensätzen extrahiert werden und bei dem von der Analyseeinrichtung eine Ergebnisdatei bereitgestellt wird, die zumindest eine Teilmenge der in der Resultatsdatei abgelegten elektronischen Bilder und ergänzend dazu extrahierte ergänzende Informationen aufweist.Advantageous can be stored in the results file electronic Images are subjected to a further analysis step in which the information supplementing the electronic images on the basis of given, in particular adjustable, analysis parameters analyzed in terms of the analysis parameters additional information about the electronic pictures extracted from the records and by the analyzer a result file is provided that contains at least a subset the electronic images stored in the result file and in addition to have extracted additional information.
Wenn es sich bei der Datensammlung um das Internet, und bei den Datensätzen um Internetseiten handelt, können zu den gefundenen und nicht verworfenen Bildern somit zusätzlich auch die Fundstellen, etwa die Internetadressen in Form der URLs ausgegeben werden.If Data collection is about the internet, and records Internet sites can be found and found not discarded pictures thus also the references, For example, the Internet addresses are output in the form of the URLs.
Bei der Ergebnisdatei kann es sich dann um eine Art liste handeln, aus der ersichtlich wird, wo sich die Suchbilder in der Datensammlung befinden.at the result file can then be a kind of list which will reveal where the search images in the data collection are located.
Vorteilhaft kann die von der Analyseeinrichtung bereitgestellte Ergebnisdatei von der Analyseeinrichtung auf ein externes Endgerät übertragen wird. Dabei kann es sich beispielsweise um ein solches Endgerät handeln, von dem auch das Suchbild ursprünglich auf die Analyseeinrichtung übertragen worden ist.Advantageous may be the result file provided by the analyzer transferred from the analysis device to an external terminal becomes. This may be, for example, such a terminal act of which also the search image originally on the Analysis device has been transferred.
Das Verfahren kann weitere Informationen wie Texte und Beschreibungen mit einbeziehen. So kann beispielsweise ein Angebot eines bestimmten Produkts identifiziert werden anhand des Bildes, und als verdächtig festgehalten werden, wenn der Preis des Angebotes deutlich unter dem Marktpreis ist.The Procedure can provide more information such as texts and descriptions to include. For example, an offer of a particular product be identified by the image, and as suspicious be kept if the price of the offer is well below is the market price.
Das Verfahren kann auf die Suche in Datenbanken speziell angepasst werden, beispielsweise hinsichtlich der aktuellen und zurückliegenden Angebote bei Auktions-Seiten oder Online-Shops.The Method can be customized to search in databases, For example, with regard to the current and past Offers at auction sites or online shops.
Markenpiraterie ist ein globales Problem, das durch die automatische Suche nach Bildern kopierter Produkte wirksamer bekämpft werden kann als durch manuelle Verfahren. Dies ist durch das erfindungsgemäße Verfahren und dessen vorteilhafte Weiterbildungen nunmehr möglich. Ebenso nimmt die unerlaubte Verwendung von Bildmaterial zu, ohne dass sie bisher wirksam mit technischen Mitteln unterbunden werden könnte. Auch dies ist mit dem Verfahren gemäß der vorliegenden Erfindung nunmehr möglich.piracy is a global problem caused by the automatic search for Pictures of copied products can be combated more effectively than through manual procedures. This is due to the invention Method and its advantageous developments now possible. Likewise, the unauthorized use of image material increases without that they are hitherto effectively prevented by technical means could. This is also with the method according to the present invention now possible.
Die Vorteile der Erfindung liegen insbesondere in der Beschreibung eines automatischen Verfahrens zur Suche einer großen Zahl von Bildern internationaler Verbreitung.The Advantages of the invention are in particular in the description of a automatic method to search a large number of Images of international distribution.
Gemäß dem zweiten Aspekt der Erfindung wird ein System zum automatischen Auffinden von elektronischen Bildern in einer Datensammlung, wobei die Datensammlung eine Mehrzahl von Datensätzen aufweist die jeweils zumindest ein elektronisches Bild aufweisen, bereitgestellt, das gekennzeichnet ist durch eine Analyseeinrichtung, aufweisend eine Einrichtung zum Bereitstellen eines elektronischen Suchbilds und auf das elektronische Suchbild bezogene ergänzende Informationen, eine Sucheinrichtung zum automatischen Suchen von zu den ergänzenden Informationen in Bezug stehenden elektronischen Bildern in den Datensätzen der Datensammlung anhand der das elektronische Suchbild ergänzenden Informationen, eine Einrichtung zur Bildanalyse des elektronischen Suchbilds, eine Vergleichseinrichtung, die ausgebildet ist, um das Ergebnis des analysierten elektronischen Suchbilds mittels einer Bildanalysemethode mit den zu den ergänzenden Informationen des Suchbildes in Bezug stehenden elektronischen Bildern zu vergleichen, und eine Einrichtung zum Ablegen einer Resultatsdatei, in der diejenigen zu den ergänzenden Informationen des Suchbildes in Bezug stehenden elektronischen Bilder der Datensätze, deren Übereinstimmungsgrad mit dem elektronischen Suchbild einen vorgegebenen Schwellwert übersteigt, abgelegt sind.According to the The second aspect of the invention is a system for automatically locating of electronic images in a data collection, the data collection a plurality of data sets each have at least having an electronic image provided is by an analysis device, comprising means for Provide an electronic search image and on the electronic Search image related supplementary information, a search facility to automatically search for supplemental information related electronic images in the datasets the data collection on the basis of the electronic search image Information, a device for image analysis of the electronic Search image, a comparison device, which is designed to the Result of the analyzed electronic search image by means of an image analysis method with the to the additional information of the search image to compare related electronic images, and a Device for filing a result file containing those related to the supplementary information of the search image standing electronic pictures of the records, their degree of agreement with the electronic search image exceeds a predetermined threshold, are stored.
Insbesondere weist das System Mittel zur Durchführung des wie vorstehend beschriebenen erfindungsgemäßen Verfahrens auf, so dass auf die Ausführungen zum Verfahren vollinhaltlich Bezug genommen und verwiesen wird.Especially the system comprises means for carrying out the above described inventive method, so that the comments on the procedure in full Reference is made and referred.
Vorteilhaft können die Datensätze jeweils zumindest ein elektronisches Bild sowie das elektronische Bild ergänzende Informationen aufweisen.Advantageous the records can each have at least one electronic Image as well as the electronic image supplementary information exhibit.
Vorteilhaft verfügt die Einrichtung zum Ablegen einer Resultatsdatei auch über Vergleichsmittel, die die gefundenen Bilder gegen den vorgegebenen Schwellenwert vergleichen.Advantageous has the facility to store a results file also via comparison means, the found images against compare the given threshold.
Vorteilhaft kann das System zum automatischen Auffinden von elektronischen Bildern in einer Datensammlung ausgebildet sein, die in Form eines Datennetzes, insbesondere als das Internet, ausgebildet ist. Insbesondere können die Datensätze der Datensammlung als Internetseiten ausgebildet sein. Vorteilhaft können die das wenigstens eine elektronische Bild eines Datensatzes ergänzenden Informationen in Form von Textinformationen und/oder Adressinformationen ausgebildet sein.Advantageous The system can automatically find electronic pictures be formed in a data collection in the form of a data network, especially as the Internet is trained. In particular, you can the datasets of the data collection are web pages be. Advantageously, the at least one electronic Image of a record of complementary information in the form be formed of text information and / or address information.
Das System kann vorzugsweise eine Einrichtung zum Erzeugen einer Ergebnisdatei aus der Resultatsdatei aufweisen.The System may preferably include means for generating a result file from the results file.
Vorteilhaft kann die Analyseeinrichtung des Systems eine Einrichtung zur Durchführung eines weiteren Analyseschritts aufweisen, die zur Analyse von die elektronischen Bilder ergänzenden Informationen anhand vorgegebener, insbesondere einstellbarer, Analyseparameter ausgebildet ist, wobei die Analyseeinrichtung eine Extraktionseinrichtung zum Extrahieren von mit den Analyseparametern in Bezug stehenden ergänzenden Informationen zu den elektronischen Bildern aufweist, und wobei die Analyseeinrichtung eine Einrichtung zum Erzeugen einer Ergebnisdatei aufweist, welche zur Erzeugung einer Ergebnisdatei aus zumindest einer Teilmenge der in der Resultatsdatei abgelegten elektronischen Bilder und ergänzend dazu extrahierter ergänzender Informationen ausgebildet ist.Advantageous For example, the analyzer of the system may include means for performing a further analysis step, for the analysis of the electronic images supplementary information predetermined, in particular adjustable, analysis parameters formed wherein the analyzing means comprises extracting means for extracting complementary to the analysis parameters Having information about the electronic images, and wherein the analyzing means comprises means for generating a result file which, for generating a result file from at least a subset of the electronic files stored in the results file Pictures and additional complementary extracted Information is formed.
Vorteilhaft ist weiterhin ein System, bei dem der Analyseeinrichtung ein elektronisches Suchbild und auf das elektronische Suchbild bezogene ergänzende Informationen bereitgestellt werden, und das dadurch gekennzeichnet ist, dass die Analyseeinrichtung eine Einrichtung, in der das Suchbild und die ergänzenden Informationen in der Analyseeinrichtung abgelegt sind, sowie Mittel zum Aktivieren des Suchbilds und der ergänzenden Informationen aufweist und/oder dass die Analyseeinrichtung eine Einrichtung zum Ermitteln des Suchbilds und der ergänzenden Informationen aufweist und/oder dass die Analyseeinrichtung eine Schnittstelle zu wenigstens einem externen Endgerät aufweist, die zum Empfangen eines Suchbilds und der das Suchbild ergänzenden Informationen von einem externen Endgerät und/oder zum Übertragen einer Ergebnisdatei zu einem externen Endgerät ausgebildet ist.Also advantageous is a system in which the analysis device is provided with an electronic search image and supplementary information relating to the electronic search image, and characterized in that the analysis device has a device in which the search image and the supplementary information are stored in the analysis device, as well as means for activating the search image and the supplementary information and / or that the analysis device comprises means for determining the search image and the supplementary Has information and / or that the analysis device has an interface to at least one external terminal, which is adapted to receive a search image and the search image complementary information from an external terminal and / or for transmitting a result file to an external terminal.
Die vorliegende Erfindung stellt insbesondere eine Möglichkeit bereit, um im Internet nach Bildern und Produktfotos zu suchen, wobei als Ergebnis die Fundstellen gemeldet werden. Dies geschieht beispielsweise nach einem „Match” mit eingestellten Fotos. Auch ist ein regelmäßiges Crawlen bestimmter Internet-Domains oder eine On-Demand-Suche möglich.The in particular, the present invention provides a possibility ready to search the Internet for pictures and product photos, the results are reported as result. This happens, for example after a "match" with set photos. Also is a regular crawling of certain Internet domains or an on-demand search possible.
Vorteile der Erfindung gegenüber dem Stand der Technik sind insbesondere, dass keine Wasserzeichen in den zu überwachenden Bildern vorhanden sein müssen, dass kein Verwaltungsaufwand erforderlich ist, dass keine Manipulation möglich ist und dass eine sofortige Prüfung des Bestandes durchführbar ist. Durch die Erfindung können eigene Bilder und fremde Bilder eigener Produkte ermittelt werden. Die vorliegende Erfindung ist insbesondere als Online-Service realisierbar. Ein Kunde lädt Bilder seiner Produkte hoch, wählt den genauen Service und erhält die Ergebnisse, beispielsweise per eMail.advantages of the invention over the prior art are in particular that no watermarks in the images to be monitored must be present that no administrative burden required is that no manipulation is possible and that one immediate examination of the stock is feasible. The invention allows own pictures and foreign pictures own products. The present invention is especially as an online service feasible. A customer loads Uploads pictures of his products, chooses the exact service and receive the results, for example by eMail.
Das erfindungsgemäße Verfahren und das erfindungsgemäße System aktiviert beispielsweise Produktfotos, durchsucht ausgewählte Domains anhand der zugehörigen Beschreibung und matcht die gefundenen Bilder – vorteilhaft zur Nachtzeit bei geringer Auslastung des Systems oder zu geplanten Zeiten zur Optimierung der Auslastung. Bei Treffern kann die Fundstelle, beispielsweise die URL, der Betreiber und dergleichen zur weiteren Verfolgung an den Kunden gegeben werden – beispielsweise ohne Kosten in Form eines reinen Online-Betriebs.The inventive method and the invention For example, System enables product photos, searches selected ones Domains based on the corresponding description and matcht the pictures found - advantageous at night at low Utilization of the system or at scheduled times for optimization the utilization. For hits, the reference, for example the URL, the operator and the like for further prosecution to the Be given to customers - for example, without cost in the form a pure online operation.
Die vorliegende Erfindung lässt sich folglich auch wie folgt umschreiben. Es wird ein elektronisches Suchbild genommen, zu dem ergänzende Informationen in Form einer Beschreibung oder dergleichen gehören. Auf Basis der ergänzenden Informationen werden über eine Suchmaschine andere Bilder gefunden. Erfindungsgemäß geht es nun darum herauszufinden, welche der gefundenen Bilder als Fundstelle im Vergleich zum Suchbild geeignet sind. Dazu werden alle gefundenen Bilder mit dem Suchbild verglichen. Solche gefundenen Bilder, die nicht in einem gewissen Maße zum Suchbild identisch sind, werden verworfen. Bei den relevantren gefundenen Bildern werden dazu ergänzende Informationen, beispielsweise die dazugehörigen Internetseiten, nach – insbesondere einstellbaren – Kriterien analysiert. Es wird eine Ergebnisliste mit den passenden Bildern und dazugehörigen Informationen, beispielsweise den Internetadressen, erstellt und dem Kunden verfügbar gemacht. Diese Fundstellen können dann einer genaueren Begutachtung unterzogen werden.The Consequently, the present invention can also be described as follows rewrite. An electronic search image is taken, to which additional information in the form of a description or belong to the same. Based on the supplementary Information gets through a search engine other pictures found. According to the invention, it is now about finding out Which of the images found as a reference in comparison to the search image are suitable. For this, all images found with the search image compared. Such found images that are not in a certain Dimensions to the search image are identical, are discarded. at the relevant images found become complementary Information, such as the associated websites, according to - in particular adjustable - criteria analyzed. It will be a result list with the matching pictures and related Information, such as the Internet addresses, created and made available to the customer. These sites can then be subjected to a closer appraisal.
Für die vorliegende Erfindung ist eine Vielzahl unterschiedlicher Anwendungsmöglichkeiten denkbar. Beispielsweise kann ein Produkthersteller Preisvergleichsportale auf Angebote seiner Marke mit weit unter dem üblichen liegenden Preisen überwachen. Ein Produkthersteller kann Online-Auktionshäuser nach Angeboten mit Fotos von seiner Webseite, die seine Rechte verletzen, durchsuchen. Ein Produkthersteller kann gegen Produktfälscher vorgehen. Produkthersteller können graue Importeure über Markenrechtsverletzungen verfolgen. Internet- oder Werbeagentur können die unautorisierte Verbreitung von Fotos im Internet, die von den Sites der Kunden entnommen wurden, verfolgen. Eine Bildagentur kann für Kunden die Originalität eines Bildes anhand der – auch legitimen – Verbreitung und Nutzung durch Andere prüfen.For The present invention is a variety of different applications conceivable. For example, a product manufacturer may price comparison portals on offers of its mark with far below the usual Monitor prices. A product manufacturer can be online auction houses for offers with photos from his website that violate his rights, search. A product manufacturer can counter product counterfeiters Action. Product manufacturers can gray importers about trademark infringement follow. Internet or advertising agency can use the unauthorized Dissemination of photos on the Internet, taken from the sites of customers were, track. A picture agency can provide for customers Originality of an image on the basis of - even legitimate - distribution and use by others.
Die Erfindung wird nachfolgend anhand eines Ausführungsbeispiels in größerem Detail beschrieben. Dabei ist in der einzigen Figur ein erfindungsgemäßes System dargestellt, das zur Durchführung des erfindungsgemäßen Verfahrens ausgebildet ist.The Invention will be described below with reference to an embodiment described in more detail. It is in the single figure shows a system according to the invention, that for carrying out the invention Method is formed.
Das
System
Über
das Endgerät
Über
eine Suchmaschine werden von der Analyseeinrichtung
Die
Bilder der Resultatsdatei
Basierend
auf den Analyseergebnissen wird eine Ergebnisdatei
- 1010
- Systemsystem
- 2020
- Einem Nutzer zugeordnetes Endgeräta User assigned terminal
- 2121
- Elektronisches Suchbild (und diese ergänzende Informationen)electronic Search image (and this supplemental information)
- 2222
- Übertragungswegtransmission path
- 3030
- Analyseeinrichtunganalyzer
- 3131
- Resultatsdateiresult file
- 3232
- Elektronisches Bildelectronic image
- 3333
- ErgebnisdateiResults file
- 3434
- Übertragungswegtransmission path
- 4040
- Datensammlung (Internet)data collection (Internet)
- 4141
- Datensatz (Internetseite)record (Website)
- 4242
- Elektronisches Bildelectronic image
- 4343
- Textinformationtext information
- 4444
- Adressinformation (Internetadresse)address information (Internet address)
- 4545
- Datensatz (Internetseite)record (Website)
- 4646
- Elektronisches Bildelectronic image
- 4747
- Textinformationtext information
- 4848
- Adressinformation (Internetadresse)address information (Internet address)
- 5050
- Kommunikationsverbindung Analyseeinrichtung – Datensammlungcommunication link Analyzer - Data Collection
ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDE IN THE DESCRIPTION
Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list The documents listed by the applicant have been automated generated and is solely for better information recorded by the reader. The list is not part of the German Patent or utility model application. The DPMA takes over no liability for any errors or omissions.
Zitierte PatentliteraturCited patent literature
- - DE 10245900 A1 [0005] DE 10245900 A1 [0005]
Claims (17)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102009007715A DE102009007715B4 (en) | 2009-02-05 | 2009-02-05 | Method and system for automatically finding electronic images in a data collection |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102009007715A DE102009007715B4 (en) | 2009-02-05 | 2009-02-05 | Method and system for automatically finding electronic images in a data collection |
Publications (2)
Publication Number | Publication Date |
---|---|
DE102009007715A1 true DE102009007715A1 (en) | 2010-08-19 |
DE102009007715B4 DE102009007715B4 (en) | 2011-04-07 |
Family
ID=42338530
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102009007715A Active DE102009007715B4 (en) | 2009-02-05 | 2009-02-05 | Method and system for automatically finding electronic images in a data collection |
Country Status (1)
Country | Link |
---|---|
DE (1) | DE102009007715B4 (en) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0866409B1 (en) * | 1997-03-19 | 2003-01-02 | Canon Kabushiki Kaisha | Image retrieval apparatus and method |
DE10245900A1 (en) | 2002-09-30 | 2004-04-08 | Neven jun., Hartmut, Prof.Dr. | Image based query system for search engines or databases of mobile telephone, portable computer uses image recognition to access more information about objects in image |
EP0657831B1 (en) * | 1993-12-09 | 2005-05-11 | Canon Kabushiki Kaisha | Image retrieving method and apparatus |
EP0713186B1 (en) * | 1994-11-15 | 2006-07-05 | Canon Kabushiki Kaisha | Method and apparatus for retrieving images from a database |
EP1202187B1 (en) * | 2000-10-30 | 2007-08-01 | Microsoft Corporation | Image retrieval system and methods with semantic and feature based relevance feedback |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPWO2006030509A1 (en) * | 2004-09-16 | 2008-05-08 | 富士通株式会社 | Image search device, image search method, image creation device, image creation method, and program |
-
2009
- 2009-02-05 DE DE102009007715A patent/DE102009007715B4/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0657831B1 (en) * | 1993-12-09 | 2005-05-11 | Canon Kabushiki Kaisha | Image retrieving method and apparatus |
EP0713186B1 (en) * | 1994-11-15 | 2006-07-05 | Canon Kabushiki Kaisha | Method and apparatus for retrieving images from a database |
EP0866409B1 (en) * | 1997-03-19 | 2003-01-02 | Canon Kabushiki Kaisha | Image retrieval apparatus and method |
EP1202187B1 (en) * | 2000-10-30 | 2007-08-01 | Microsoft Corporation | Image retrieval system and methods with semantic and feature based relevance feedback |
DE10245900A1 (en) | 2002-09-30 | 2004-04-08 | Neven jun., Hartmut, Prof.Dr. | Image based query system for search engines or databases of mobile telephone, portable computer uses image recognition to access more information about objects in image |
Also Published As
Publication number | Publication date |
---|---|
DE102009007715B4 (en) | 2011-04-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
DE10300545B4 (en) | Device, method, storage medium and data structure for the identification and storage of data | |
DE69909435T2 (en) | IMAGING SECURITY INFORMATION IN A USEFUL FORMAT | |
DE112014000408B4 (en) | Safe storage and access to digital artifacts | |
DE102017005963A1 (en) | Providing relevant video scenes in response to a video search query | |
DE112016005555T5 (en) | CAPTCHA image-based tasks | |
DE102006011294A1 (en) | Method and communication system for the computer-aided finding and identification of copyrighted content | |
DE102019109288A1 (en) | System and method for analysis of the imported video | |
DE102004026083A1 (en) | Server based linking of information e.g. for finding information on internet, has functional unit having content signature unit, to form document section and or file content which are embedded in electronic document. | |
DE102012218966A1 (en) | Method and system for identifying original data generated by things in the Internet of Things | |
DE102017125463A1 (en) | USING MASCHINELLE LEARNING TO DETECT AN IMAGE COMPONENT IN A COMPOSITE IMAGE | |
DE112020000004T5 (en) | Information delivery system and information delivery process | |
DE202008018638U1 (en) | Generic format for the efficient transmission of data | |
DE112011100196B4 (en) | Method, apparatus and computer program product for verifying secure data | |
DE102012222036A1 (en) | Personalizing Internet search content based on targeted data derived user data | |
DE102015008874A1 (en) | Data of complement documents for web services on the Internet. | |
CH712988B1 (en) | A method of searching data to prevent data loss. | |
Almishari et al. | Ads-portal domains: Identification and measurements | |
DE102009007715B4 (en) | Method and system for automatically finding electronic images in a data collection | |
CN104899320A (en) | Webpage repair method, terminal, server and system | |
DE202022102520U1 (en) | System for analyzing advertising on online video platforms for digital marketing through machine learning to reach wide audiences | |
WO2011044865A1 (en) | Method for determining a similarity of objects | |
DE102012218268A1 (en) | Manage digital signatures | |
WO2021190715A1 (en) | Computer-implemented method and distributed storage system for providing reliable data objects | |
DE10108564A1 (en) | Method for searching for data currently or previously stored in a distributed system or data containing data, taking into account the time of their availability | |
EP2017758A1 (en) | Computer-assisted system and computer-assisted method for content verification |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
OM8 | Search report available as to paragraph 43 lit. 1 sentence 1 patent law | ||
OP8 | Request for examination as to paragraph 44 patent law | ||
R020 | Patent grant now final | ||
R020 | Patent grant now final |
Effective date: 20110823 |
|
R082 | Change of representative |
Representative=s name: MUELLER, THOMAS, DIPL.-ING., DE |