DE102015108236A1

DE102015108236A1 - Method for linking printed texts with digital content

Info

Publication number: DE102015108236A1
Application number: DE102015108236.5A
Authority: DE
Inventors: Karl-Ludwig von Wendt; Olaf Voß
Original assignee: Briends GmbH
Current assignee: Briends GmbH
Priority date: 2015-05-26
Filing date: 2015-05-26
Publication date: 2016-12-01

Abstract

Die vorlegende Erfindung betrifft ein Verfahren zur Verknüpfung von gedruckten Texten mit digitalen Inhalten, sowie ein entsprechendes System und einen entsprechenden Server sowie einen Datenträger beinhaltend eine entsprechende Software, wobei besondere Vergleiche durchgeführt werden. Aufgabe der vorliegenden Erfindung ist es, bekannte Verfahren weiter zu entwickeln, und insbesondere auch die Überprüfung derart weiterzuentwickeln, dass aus herkömmlichem Text entsprechende Verbindungen zu weiteren Inhalten extrahierbar sind und entsprechende Validierungen auch in Bezug auf die Quelle des Textes ermöglicht werden. Gelöst wird die Aufgabe durch ein Verfahren, bei dem ein Vergleich der Texte sowie der Textanordnungen nach vorgegebenen Kriterien durchgeführt wird.The present invention relates to a method for linking printed texts with digital content, as well as a corresponding system and a corresponding server and a data carrier containing a corresponding software, wherein special comparisons are performed. Object of the present invention is to further develop known methods, and in particular to further develop the review such that from conventional text corresponding compounds to other content can be extracted and appropriate validations are also made possible with respect to the source of the text. The problem is solved by a procedure in which a comparison of the texts and the text arrangements is carried out according to predetermined criteria.

Description

Die vorlegende Erfindung betrifft ein Verfahren zur Verknüpfung von gedruckten Texten mit digitalen Inhalten, sowie ein entsprechendes System und einen entsprechenden Server sowie einen Datenträger beinhaltend eine entsprechende Software, wobei besondere Vergleiche durchgeführt werden.The present invention relates to a method for linking printed texts with digital content, as well as a corresponding system and a corresponding server and a data carrier containing a corresponding software, wherein special comparisons are performed.

Aus der DE 10 2013 019 675 B3 ist es bekannt, herkömmliche Informationsträger auf entsprechende Verbindungscodes zu untersuchen und abhängig von einem Auffinden solcher, entsprechende Informationen wiederzugeben bzw. zu übermitteln. Ein ähnliches Verfahren ist auch aus der US 2007/0019864 A1 bekannt. From the DE 10 2013 019 675 B3 It is known to examine conventional information carriers for corresponding connection codes and, depending on finding such, to reproduce corresponding information. A similar procedure is also from the US 2007/0019864 A1 known.

Darüber hinaus ist es auch bekannt, Grafik und Textelemente separat zu überprüfen und diese Überprüfungen einem Gesamtergebnis zuzuführen, wie dies beispielsweise in der DE 10 2012 008 512 A1 offenbart ist. In addition, it is also known to separately check graphics and text elements and to give these checks an overall result, as for example in the DE 10 2012 008 512 A1 is disclosed.

Aufgabe der vorliegenden Erfindung ist es, derartige Verfahren weiter zu entwickeln, und insbesondere auch die Überprüfung derart weiterzuentwickeln, dass aus herkömmlichem Text entsprechende Verbindungen zu weiteren Inhalten extrahierbar sind und entsprechende Validierungen auch in Bezug auf die Quelle des Textes ermöglicht werden. The object of the present invention is to further develop such methods, and in particular to further develop the verification such that corresponding connections to other contents can be extracted from conventional text and corresponding validations are also made possible with respect to the source of the text.

Dabei kann es auch Gegenstand des Verfahrens sein, anstelle der Übermittlung und/oder Wiedergabe von Informationen zusätzlich oder stattdessen andere Schritte einzuleiten, wie beispielsweise Rabatte zu gewähren oder Steuerungsvorgänge oder Verfahren einzuleiten bzw. durchzuführen. It may also be the subject of the method, in addition to the transmission and / or reproduction of information in addition or instead to initiate other steps, such as to grant discounts or initiate or carry out control processes or procedures.

Gelöst wird die Aufgabe durch ein Verfahren gemäß Anspruch 1, ein System oder Server gemäß Anspruch 9 und einen Datenträger gemäß Anspruch 10. Die abhängigen Ansprüche 2 bis 8 geben vorteilhafte Weiterbildungen an. The object is achieved by a method according to claim 1, a system or server according to claim 9 and a data carrier according to claim 10. The dependent claims 2 to 8 indicate advantageous developments.

Das Verfahren zur Übermittlung und/oder Wiedergabe von Informationen kann unterschiedlichste Arten von Informationen übermitteln und/oder wiedergeben. Hier können beispielsweise Textinhalte, Bilder, begleitende Informationen, Audi-, Videoinhalte, Rabattgutscheine und/oder auch die bloße Information über das Überprüfungsergebnis beinhaltet oder umfasst sein. Insbesondere wird bevorzugt, wenn Textabschnitte in der Information enthalten sind oder die Information durch solche Textabschnitte gebildet wird. Die Übermittlung und/oder Wiedergabe kann beispielsweise an bzw. auf einem Endgerät, wie beispielsweise einem Laptop, einem PDA, einem Tablet, einem Notebook oder einem Smartphone erfolgen. Aber auch eine Anzeige zum Beispiel auf einem Display, Monitor oder ähnlichem ist denkbar. Die Übermittlung kann beispielsweise drahtlos, beispielsweise über das Internet oder andere Medien erfolgen. Mit besonderem Vorteil werden die Informationen zumindest übermittelt, insbesondere übermittelt und wiedergegeben, wobei die Wiedergabe insbesondere in einer Anzeige der Information besteht. Andere Wiedergaben, wie beispielsweise das Abspielen von Video- und/oder Audiosignalen sind jedoch ebenfalls möglich. The method for transmitting and / or reproducing information can transmit and / or reproduce various types of information. Here, for example, text contents, images, accompanying information, audio, video content, discount vouchers and / or even the mere information about the check result may be included or included. In particular, it is preferred if text sections are included in the information or the information is formed by such text sections. The transmission and / or reproduction can take place, for example, on or on a terminal, such as a laptop, a PDA, a tablet, a notebook or a smartphone. But even a display, for example, on a display, monitor or the like is conceivable. The transmission can take place, for example, wirelessly, for example via the Internet or other media. With particular advantage, the information is at least transmitted, in particular transmitted and reproduced, wherein the reproduction consists in particular in a display of the information. However, other playbacks such as playing video and / or audio signals are also possible.

Das Verfahren umfasst dabei einen Schritt, in dem mindestens eine Seite oder ein Seitenabschnitt einer Seite optisch erfasst oder eine optische Ablichtung einer Seite oder eines Seitenabschnittes einer Seite empfangen wird. Dabei enthält die Seite oder der Seitenabschnitt mindestens zwei Wörter. Darüber hinaus wird eine Texterkennung von auf der Seite oder dem Seitenabschnitt enthaltenen Zeilen durchgeführt, durch die eine Menge an erkannten Zeichengruppierungen, insbesondere jeweils zusammenhängenden Zeichengruppierungen, insbesondere Wörtern, erhalten wird, die zumindest teilweise den enthaltenden Wörtern auf der Seite vermutlich entspricht und/oder ähnelt. Eine sichere Entsprechung kann auf Grund von Fehlern der Texterkennung nicht erwartet werden.The method in this case comprises a step in which at least one side or a side section of a page is optically detected or an optical illumination of a page or a side section of a page is received. The page or page section contains at least two words. In addition, text recognition is performed on lines contained on the page or page section, by which a set of recognized character groupings, in particular respective contiguous character groupings, in particular words, which at least partially corresponds to and / or resembles the containing words on the page, is obtained , A secure match can not be expected due to text recognition errors.

Alternativ kann auch ein Text empfangen werden, der Zeichengruppierungen und zumindest relative Positionsangaben zu den Zeichengruppierungen enthält. Derartige Zeichengruppierungen sind insbesondere jeweils zusammenhängende Zeichengruppierungen, insbesondere Wörter. Über relative Positionsangaben hinausgehend können auch absolute Positionsangaben enthalten sein. Es ist beispielsweise möglich, jeweils einen Anfangspunkt und ggf. auch eine Erstreckung zu jeder Zeichengruppierung als relative oder absolute Angabe zu empfangen. Es können jedoch auch Positionsangaben zu jedem einzelnen Zeichen empfangen werden. Auch eine Kombination oder eine ähnliche Ausführung sind denkbar. Alternatively, a text can also be received that contains character groupings and at least relative position information to the character groupings. Such character groupings are, in particular, respective contiguous character groupings, in particular words. Beyond relative position information, absolute position information may also be included. For example, it is possible to receive in each case a starting point and possibly also an extension to each character grouping as relative or absolute information. However, position information about each character can also be received. A combination or a similar design are conceivable.

Darüber hinaus wird verfahrensgemäß aus einer digitalen Datensammlung, insbesondere Datenbank, die Informationen zu auf gedruckten Seiten beinhalteten gedruckten Zeichen umfasst, aufgrund mindestens eines Vergleiches der der empfangenen oder durch Texterkennung erkannten Zeichengruppierungen mit Informationen der digitalen Datensammlung, insbesondere mit gedruckten Zeichen, die als Information in der digitalen Datensammlung enthalten sind, mindestens eine gedruckte Seite oder ein Abschnitt mindestens einer gedruckten Seite aus der digitalen Datensammlung als Kandidat ermittelt. Dabei weist der mindestens eine Kandidat möglichst viele Zeichengruppierungen einer Erstauswahl der erkannten oder empfangenen Zeichengruppierungen auf. Moreover, according to the method, from a digital data collection, in particular a database, containing information on printed characters contained on printed pages, due to at least a comparison of the received or recognized text character groups with digital data collection information, in particular with printed characters, as information in contained in the digital data collection, at least one printed page or a section of at least one printed page from the digital data collection determined as a candidate. In this case, the at least one candidate has as many character groupings as possible of an initial selection of the recognized or received character groupings.

In diesem Schritt wird somit mindestens ein Kandidat aus der digitalen Datensammlung ermittelt, der möglichst viele Zeichengruppierungen aufweist, die auch im empfangenen Text oder in den erkannten Zeichengruppierungen enthalten sind. Dabei wird die Wahrscheinlichkeit zugrunde gelegt, mit der es sich bei der optisch erfassten Seite oder der der optischen Abbildung zugrunde liegenden Seite um ein Exemplar des mindestens einen Evaluationskandidaten oder bei dem optisch erfassten Seitenabschnitt um einen Ausschnitt eines Exemplars des mindestens einen Evaluationskandidaten oder bei dem empfangenen Text mit Positionsangaben um zu dem mindestens einen Evaluationskandidaten passenden Text und Positionsangaben handelt. Es wird somit für zumindest einen der Kandidaten, der als Evaluationskandidat behandelt wird, eine solche Wahrscheinlichkeit ermittelt oder es wird ein Ranking zwischen einzelnen als Evaluationskandidaten bestimmten Kandidaten festgelegt. Es kann aber auch eine Wahrscheinlichkeit für jeden der als ermittelten Kandidaten bestimmt werden und können somit alle Kandidaten zu Evaluationskandidaten erhoben werden. Die Festlegung, welcher Kandidat als Evaluationskandidat behandelt wird, kann anhand verschiedener Kriterien durchgeführt werden. Zum einen kann beispielsweise beginnend bei dem Kandidaten mit der höchsten Übereinstimmung im vorhergehenden Vergleich als Evaluationskandidat eine Wahrscheinlichkeit bestimmt werden und dann entschieden werden, ob die Wahrscheinlichkeit ausreicht und somit kein weiterer Kandidat als Evaluationskandidat verwendet wird oder ob, beispielsweise aufgrund des Wahrscheinlichkeitswertes für den ersten Evaluationskandidaten ein weiterer Kandidat als Evaluationskandidat behandelt werden soll. Aber auch andere Vorgehensweisen, bei denen beispielsweise eine festgelegte Anzahl von Kandidaten als Evaluationskandidat behandelt wird, sind denkbar. In this step, at least one candidate is thus determined from the digital data collection which has as many character groupings as possible which are also contained in the received text or in the recognized character groupings. This is based on the probability with which the optically recorded page or the page underlying the optical image is a copy of the at least one evaluation candidate or the optically acquired page section is a section of a copy of the at least one evaluation candidate or the received one Text with position information to which at least one evaluation candidate matches the text and position information. Thus, for at least one of the candidates being treated as an evaluation candidate, such a probability is determined or a ranking is determined between individual candidates determined as evaluation candidates. However, it is also possible to determine a probability for each of the candidates identified, and thus all candidates can be made evaluation candidates. The determination of which candidate is to be considered as an evaluation candidate can be carried out on the basis of various criteria. On the one hand, for example, starting with the candidate with the highest match in the previous comparison as an evaluation candidate, a probability can be determined and then a decision is made as to whether the probability is sufficient and thus no further candidate is used as the evaluation candidate or if, for example, based on the probability value for the first evaluation candidate Another candidate should be treated as an evaluation candidate. But other approaches, for example, where a fixed number of candidates are treated as evaluation candidates, are conceivable.

Auch ist die Bildung des Wahrscheinlichkeitswertes auf verschiedene Arten und Methoden denkbar. Also, the formation of the probability value on different types and methods is conceivable.

Sodann umfasst das erfindungsgemäße Verfahren insbesondere die Wiedergabe und/oder das Übermitteln von mit dem Evaluationskandidaten des mindestens einen Evaluationskandidaten, für den die höchste Wahrscheinlichkeit ermittelt wurde, über die digitale Datensammlung oder Nutzung der Information der digitalen Datensammlung verknüpften Information, wenn der Wahrscheinlichkeitswert eine vorgegebene Grenze überschreitet und Unterlassen des Übermittelns und/oder Wiedergebens oder des anderen Schritts, wie Einräumung eines Rabattes, von dem Evaluationskandidaten des mindestens einen Evaluationskandidaten, für den die höchste Wahrscheinlichkeit ermittelt wurde, wenn der Wahrscheinlichkeitswert eine vorgegebene Grenze unterschreitet. The method according to the invention then comprises, in particular, the reproduction and / or transmission of information linked to the evaluation candidate of the at least one evaluation candidate for which the highest probability has been determined, via the digital data collection or use of the information of the digital data collection, if the probability value has a predetermined limit exceeds and omitting the transmitting and / or reproducing or the other step, such as granting a discount, from the evaluation candidate of the at least one evaluation candidate for which the highest probability was determined when the probability value falls below a predetermined limit.

Dabei ist das erfindungsgemäße Verfahren insbesondere dadurch gekennzeichnet, dass ein zweiter Vergleich einen Vergleich umfasst, bei dem eine Auswahl kombinatorisch möglicher Paare einer Zeichengruppierungsauswahl der erkannten oder empfangenen Zeichengruppierungen gebildet wird. Es wird also eine Zeichengruppierungsauswahl aus den erkannten oder empfangenen Zeichengruppierungen gebildet. Dies kann anhand verschiedener Kriterien durchgeführt werden. Die Auswahl kann auch alle erkannten Zeichengruppierungen bzw. empfangenen Zeichengruppierungen umfassen. Sodann wird eine Auswahl kombinatorisch möglicher Paare der Zeichengruppierungsauswahl gebildet. Diese Auswahl kann wiederum alle kombinatorisch möglichen Paare enthalten, es kann auch eine Auswahl anhand verschiedener Kriterien durchgeführt werden. In this case, the method according to the invention is characterized in particular in that a second comparison comprises a comparison in which a selection of combinatorially possible pairs of a character grouping selection of the recognized or received character groupings is formed. Thus, a character grouping selection is formed from the recognized or received character groupings. This can be done on the basis of different criteria. The selection may also include all recognized character groupings or received character groupings. Then, a selection of combinatorially possible pairs of the character grouping selection is formed. This selection in turn may contain all combinatorially possible pairs, it may also be a selection based on various criteria.

Darüber hinaus werden die relativen Positionen der in der Auswahl kombinatorisch möglicher Paare jeweils enthaltenen Zeichengruppierungen bestimmt und wird für jedes Paar der Auswahl jeweils ein in Bezug auf die relative Position der enthaltenen Zeichengruppierungen nach vorgegebenen Kriterien passendes Referenzzeichengruppenpaar von die Zeichengruppierungen des Paares enthaltenden gedruckten Zeichen in dem mindestens einen Evaluationskandidaten gesucht. Es wird also bestimmt, ob ein räumlich passendes identisches Zeichengruppierungspaar als Referenzzeichengruppenpaar in dem Evaluationskandidaten enthalten ist. Moreover, the relative positions of the character groupings respectively contained in the selection of combinatorially possible pairs are determined, and for each pair of the selection, a reference character group pair corresponding to the relative position of the contained character groupings according to predetermined criteria of printed characters containing the character groupings of the pair is respectively written at least one candidate for evaluation sought. It is thus determined whether a spatially matching identical character grouping pair is included as a reference character group pair in the evaluation candidate.

Alternativ kann, anders herum vorgehend, aus dem mindestens einen Evaluationskandidaten für jedes Paar der Auswahl kombinatorisch möglicher Paare mindestens ein Referenzzeichengruppenpaar mit gedruckten Zeichen aus der als Evaluationskandidat bestimmten gedruckten Seite gesucht werden. Dabei enthält das Referenzzeichengruppenpaar die jeweiligen Zeichengruppierungen des jeweiligen Paares der Auswahl kombinatorisch möglicher Paare. Hier können auch alle möglichen Referenzgruppenpaare des jeweiligen Evaluationskandidaten bestimmt werden. Es kann sich jedoch auch auf eine gewisse, beispielsweise vorgegebene, Anzahl beschränkt werden. Alternatively, conversely, from the at least one evaluation candidate for each pair of combinatorially possible pair selection, at least one reference character group pair of printed characters may be searched from the printed page designated as the evaluation candidate. The reference character group pair contains the respective character groupings of the respective pair of the selection of combinatorially possible pairs. Here also all possible reference group pairs of the respective evaluation candidate can be determined. However, it may also be limited to a certain number, for example predetermined.

Darüber hinaus werden die relativen Positionen der gedruckten Zeichen in den Referenzzeichengruppen auf der als Evaluationskandidat bestimmten gedruckten Seite bestimmt und aus den Referenzzeichengruppenpaaren zu jedem Paar der Auswahl kombinatorisch möglicher Paare ein jeweils zu dem Paar der Auswahl kombinatorisch möglicher Paare in Bezug auf die relative Position nach den vorgegebenen Kriterien passendes Referenzzeichengruppenpaar gesucht. Moreover, the relative positions of the printed characters in the reference character groups are determined on the printed page designated as the evaluation candidate, and from the reference character group pairs to each pair of combinatorially possible pair selection, each pair corresponding to the pair of combinatorially possible pairs in relation to the relative position predefined criteria matching reference character group pair sought.

Es wird also, kurz gesprochen, mindestens ein Referenzzeichengruppenpaar im Evaluationskandidaten bestimmt und geprüft, ob deren Referenzzeichengruppen in Bezug auf die Position auf der Seite bzw. dem Seitenausschnitt zu dem erkannten Text bzw. dem empfangenen Text und den entsprechenden Positionierungen passen. Thus, in short, at least one reference character group pair in the evaluation candidate is determined and checked as to whether their reference character groups with respect to the position on the page or the page detail match the recognized text or the received text and the corresponding positioning.

Dabei können als vorgegebene Kriterien verschiedene angewandt werden. Einige mögliche davon werden weiter unten im nachfolgenden Text näher erläutert und/oder exemplarisch vorgestellt. Different criteria can be applied as predefined criteria. Some of these will be explained in more detail in the following text and / or presented as an example.

Erfindungsgemäß wird für den mindestens einen Evaluationskandidaten ein Evaluationswert bestimmt, der angibt, zu wie vielen der Paare, die in der Auswahl der kombinatorisch möglichen Paare enthalten sind, in dem mindestens einen Evaluationskandidaten nach den vorgegebenen Kriterien in Bezug auf die relative Position mindestens ein passendes Referenzzeichengruppenpaar vorliegen. Erfindungsgemäß basiert der Wahrscheinlichkeitswert und/oder das Wahrscheinlichkeitsranking auf dem Evaluationswert des mindestens einen Evaluationskandidaten. According to the invention, for the at least one evaluation candidate, an evaluation value is determined which specifies to how many of the pairs contained in the selection of combinatorially possible pairs at least one matching reference character group pair in the at least one evaluation candidate according to the predetermined criteria with respect to the relative position available. According to the invention, the probability value and / or the probability ranking are based on the evaluation value of the at least one evaluation candidate.

Dabei kann ein solcher Evaluationswert auf beide zuvor geschilderte Arten erreicht werden, zum Einen in dem basierend auf der Auswahl der kombinatorisch möglichen Paare begonnen wird und zum Anderen in den von den Evaluationskandidaten ausgehend begonnen wird. In this case, such an evaluation value can be achieved in both previously described ways, on the one hand, based on the selection of the combinatorially possible pairs, and on the other hand, starting from the evaluation candidates.

Durch ein derartiges Verfahren lassen sich beispielsweise unterschiedliche Versionen von einem Text unterscheiden, bei denen der Text identisch ist, die Textanordnung sich jedoch unterscheidet, wie dies beispielsweise bei unterschiedlichen Ausgaben eines Buches der Fall sein kann. Darüber hinaus lassen sich auch innerhalb eines Buches mehrere Stellen, die den gleichen Text zeigen, voneinander unterscheiden, sofern sich die Anordnung des Textes, beispielsweise die Zeilenumbrüche, an den unterschiedlichen Stellen unterscheiden. Darüber hinaus lassen sich auch Fotografien beispielsweise von Google-Books von den tatsächlichen gedruckten Büchern unterscheiden, da auch hier ein Unterschied in Bezug auf die Anordnung des Textes meist feststellbar ist. By such a method, for example, different versions can be distinguished from a text in which the text is identical, but the text arrangement differs, as may be the case, for example, in different editions of a book. Moreover, even within a book, several passages showing the same text can be distinguished from each other, as long as the arrangement of the text, for example the line breaks, differs at the different points. In addition, photographs, for example, from Google Books can be distinguished from the actual printed books, as here, too, a difference in terms of the arrangement of the text is usually detectable.

All dies ist möglich, ohne weitere Informationen, wie beispielsweise versteckte Codes oder Barcodes auf die Seiten aufdrucken zu müssen. Die digitale Datensammlung umfasst dabei insbesondere Dokumente, die die gedruckten Seiten beinhalten, beispielsweise als maschinenlesbare pdf-Dokumente, aber auch das Vorhalten von reinen Bilddokumenten ist möglich, sofern der Text auslesbar ist, beispielsweise über eine Texterkennung.All this is possible without having to print further information, such as hidden codes or barcodes on the pages. The digital data collection includes in particular documents that contain the printed pages, such as machine-readable pdf documents, but also the provision of pure image documents is possible if the text is readable, for example via a text recognition.

Mit besonderem Vorteil enthält die Auswahl kombinatorisch möglicher Paare einer Zeichengruppierungsauswahl mindestens ein Zeichen und/oder mindestens eine Zeichenfolge, die in den gedruckten Zeichen des Evaluationskandidaten und/oder Kandidaten und/oder den empfangenen Text und/oder in der Menge der erkannten Zeichengruppierungen jeweils maximal fünfmal, insbesondere maximal dreimal vorkommt. Alternativ oder zusätzlich kann die Auswahl kombinatorisch möglicher Paare einer Zeichengruppierungsauswahl auch derart erfolgen, dass insgesamt im gesamten Sprachgebrauch seltene Zeichen bevorzugt in der Zeichengruppierungsauswahl beinhaltet und in der Auswahl kombinatorisch möglicher Paare einer Zeichengruppierungsauswahl beinhaltet werden. Genauso kann auch mit seltenen Zeichenfolgen vorgegangen werden, die ebenfalls vorteilhaft in der Auswahl und/oder der Zeichengruppierungsauswahl beinhaltet werden. With particular advantage, the selection of combinatorially possible pairs of a character grouping selection contains at least one character and / or at least one character string which is not more than five times in the printed characters of the evaluation candidate and / or candidate and / or the received text and / or in the set of recognized character groupings , In particular, occurs at most three times. Alternatively or additionally, the selection of combinatorially possible pairs of a character grouping selection can also take place in such a way that overall characters that are rare throughout the entire language are preferably included in the character grouping selection and included in the selection of combinatorially possible pairs of a character grouping selection. In the same way, it is also possible to proceed with rare strings, which are likewise advantageously included in the selection and / or the character grouping selection.

Durch eine derartige Durchführung der Zeichengruppierungsauswahl bzw. der Auswahl kombinatorisch möglicher Paare lässt sich mit besonders wenig Rechenaufwand ein besonders effektiver und aussagekräftiger Vergleich erreichen.Such a performance of the character grouping selection or the selection of combinatorially possible pairs makes it possible to achieve a particularly effective and meaningful comparison with very little computational effort.

Mit besonderem Vorteil umfasst die Erstauswahl alle empfangenen oder erkannten Zeichengruppierungen und/oder umfasst die Auswahl kombinatorisch möglicher Paare alle kombinatorisch möglichen Paare und/oder umfasst die Zeichengruppierungsauswahl alle Zeichengruppierungen. With special advantage, the first selection comprises all received or recognized character groupings and / or comprises the selection of combinatorially possible pairs of all combinatorially possible pairs and / or the character grouping selection comprises all character groupings.

Die Erstauswahl kann auf verschiedene Art und Weise gebildet werden. Sie kann beispielsweise die Gesamtheit der erkannten Zeichengruppierungen bzw. der empfangenen Zeichengruppierungen enthalten, sie kann aber auch nur einen Teil enthalten, dabei kann sie insbesondere seltene Zeichen oder Zeichenfolgen bevorzugt enthalten und/oder auf seltene Zeichen oder Zeichenfolgen beschränkt sein, beispielsweise solche bzw. auf solche die in einer oder mehrerer Sprachen insgesamt selten verwendet werden oder solche bzw. auf solche, die in den erkannten oder empfangenen Zeichengruppierungen selten vorkommen, insbesondere maximal fünfmal, insbesondere maximal dreimal.The initial selection can be made in different ways. It may, for example, contain the entirety of the recognized character groupings or of the received character groupings, but it may also contain only one part, in which case it can preferably contain rare characters or character sequences and / or be limited to rare characters or character sequences, for example those or on those that are rarely used in one or more languages altogether or those or those that are rare in the recognized or received character groupings, in particular a maximum of five times, in particular a maximum of three times.

Durch Beinhalten aller Zeichengruppierungen in der Erstauswahl und/oder aller kombinatorisch möglicher Paare in der Auswahl kann ein besonders aussagekräftiger Vergleich erreicht werden, wenn auch die Rechenzeit entsprechend hoch anzusetzen ist. By including all character groupings in the initial selection and / or all combinatorially possible pairs in the selection, a particularly meaningful comparison can be achieved, even if the calculation time is set correspondingly high.

Mit besonderem Vorteil umfasst die Erstauswahl alle Zeichengruppierungen der Zeichengruppierungsauswahl und/oder umfasst die Zeichengruppierungsauswahl alle Zeichengruppierungen der Erstauswahl. Durch eine entsprechende Übereinstimmung bzw. teilweise Übereinstimmung der Auswahl, insbesondere bei Durchführung einer Auswahl zur Verringerung der Rechenzeit, kann dies an beiden Stellen gleichlautend durchgeführt werden. Insbesondere ist dadurch auch sicherstellbar, dass entsprechende Paare zumindest unabhängig von deren Anordnung im Evaluationskandidaten bzw. Kandidaten aufgefunden werden können. With particular advantage, the first selection comprises all character groupings of the character grouping selection and / or the character grouping selection comprises all the character groupings of the initial selection. By an appropriate Correspondence or partial agreement of the selection, in particular when performing a selection to reduce the computing time, this can be carried out identically in both places. In particular, this also makes it possible to ensure that corresponding pairs can be found at least independently of their arrangement in the evaluation candidate or candidate.

Mit besonderem Vorteil ist das vorgegebene Kriterium zumindest zum Teil dadurch gegeben, ob die Anordnung der Referenzzeichengruppen als in der gleichen oder in einer anderen Zeile des Textes angeordnet mit der Anordnung des jeweiligen Paars von Zeichengruppierungen der Auswahl kombinatorisch möglicher Paare der Zeichengruppierungsauswahl übereinstimmt. Ist also im erkannten bzw. empfangenen Text das jeweilige Paar in der gleichen Zeile angeordnet, müsste das Referenzzeichengruppenpaar ebenfalls in einer Zeile angeordnet sein, um diesem Kriterium gerecht zu werden. Sind beispielsweise die Zeilenumbrüche zwischen dem empfangenen bzw. erkannten Text gegenüber denen im Evaluationskandidaten so verschoben, dass dies auch das Referenzzeichengruppenpaar betrifft, und dieses somit beispielsweise in einer Zeile angeordnet ist, während das entsprechende Paar von Zeichengruppierungen der Auswahl kombinatorisch möglicher Paare der Zeichengruppierungsauswahl im empfangenen bzw. erkannten Text in unterschiedlichen Zeilen angeordnet ist, wäre das Kriterium nicht erfüllt. With particular advantage, the predetermined criterion is at least in part given by whether the arrangement of the reference character groups as arranged in the same or in another line of the text matches the arrangement of the respective pair of character groupings of selecting combinationally possible pairs of the character grouping selection. Thus, if the respective pair is arranged in the same line in the recognized or received text, then the reference character group pair would also have to be arranged in one line in order to meet this criterion. If, for example, the line breaks between the received or recognized text are shifted from those in the evaluation candidate, this also concerns the reference character group pair, and this is thus arranged in a line, for example, while the corresponding pair of character groupings selects combinatorially possible pairs of the character grouping selection in the received or recognized text is arranged in different lines, the criterion would not be met.

Zusätzlich oder alternativ kann das vorgegebene Kriterium beinhalten oder darin bestehen, ob die relative Anordnung der Referenzzeichengruppen im Referenzzeichengruppenpaar verglichen mit der relativen Anordnung der Zeichengruppierungen im Paar von Zeichengruppierungen der Auswahl kombinatorisch möglicher Paare der Zeichengruppierungsauswahl mit einer Toleranz von zum Beispiel bis zu 5% der Gesamtabmessung der optischen Ablichtung, des empfangenen Textes und/oder der gedruckten Seite und/oder von zwei Buchstabenhöhen und/oder zwei Buchstabenbreiten übereinstimmt. Dabei beziehen sich die Maße von Buchstabenhöhen bzw. Buchstabenbreiten insbesondere auf den jeweiligen Text, also bei der relativen Anordnung der Referenzzeichengruppen auf die in der digitalen Datensammlung enthaltenen Informationen bzw. gedruckten Zeichen und/oder bei dem Paar der Zeichengruppierungen der Auswahl kombinatorisch möglicher Paare der Zeichengruppierungsauswahl auf den erkannten bzw. empfangenen Text bzw. auf die Ablichtung der Seite bzw. des Seitenabschnittes. Additionally or alternatively, the predetermined criterion may include or consist of determining whether the relative location of the reference character groups in the reference character group pair compared to the relative arrangement of the character groupings in the pair of character groupings selects combinatorially possible pairs of character grouping choices with a tolerance of, for example, up to 5% of the overall dimension the optical illumination, the received text and / or the printed page and / or two letter heights and / or two letter widths. In this case, the dimensions of letter heights or letter widths relate in particular to the respective text, that is to say the relative arrangement of the reference character groups on the information or printed characters contained in the digital data collection and / or on the pair of character groupings of the selection of combinatorially possible pairs of the character grouping selection on the recognized or received text or on the illumination of the page or the side section.

Durch die Vorsehung solcher Toleranzen können insbesondere Erkennungsungenauigkeiten, beispielsweise bei schräger Ablichtung oder andere Toleranzen, wie beispielsweise beim Druck berücksichtigt werden, insbesondere ohne die Erkennungsgenauigkeit wesentlich zu verschlechtern. By providing such tolerances, in particular detection inaccuracies, for example in oblique illumination or other tolerances, such as in printing, can be taken into account, in particular without significantly impairing the recognition accuracy.

Alternativ oder zusätzlich kann das vorgegebene Kriterium dadurch gegeben sein, ob die Reihenfolge der Zeichengruppen und Referenzzeichengruppen in Leserichtung übereinstimmt. Alternatively or additionally, the predetermined criterion can be given by whether the order of the character groups and reference character groups in reading direction matches.

Alternativ und/oder zusätzlich kann das vorgegebene Kriterium dadurch gegeben sein, ob die Anordnung der Zeichengruppen und Referenzzeichengruppen in Kategorien wie oberhalb oder unterhalb und/oder rechts oder links voneinander übereinstimmt. Hier ist somit die Anordnung der Zeichengruppen bzw. Referenzzeichengruppen beispielsweise innerhalb eines XY-Koordinatensystems auf der Seite dahin zu betrachten, ob das Vorzeichen der Differenz der X-Koordinaten bzw. Vorzeichen der Differenz der Y-Koordinaten zwischen Paar der Auswahl und Referenzzeichengruppenpaar übereinstimmt. Dies ist in Abgrenzung von in Leserichtung vor oder nacheinander stehend zu beurteilen, da sich die Leserichtung von einer Zeile am Zeilenende auf die danach folgende Zeile am Zeilenanfang erstreckt. Alternatively and / or additionally, the predetermined criterion can be given by whether the arrangement of the character groups and reference character groups in categories such as above or below and / or right or left match. Here, therefore, the arrangement of the character groups or reference character groups, for example, within an XY coordinate system on the page is to be considered as to whether the sign of the difference of the X coordinates or signs matches the difference of the Y coordinates between the pair of the selection and the reference character group pair. This is to be judged as distinguished from in the reading direction before or after one another, since the reading direction extends from one line at the end of the line to the next following line at the beginning of the line.

Gelöst wird die Aufgabe auch durch ein System oder Server zur Übermittlung und/oder Wiedergabe von Informationen, aufweisend einen Server und eine digitale Datensammlung enthaltend Informationen zur auf gedruckten Seiten beinhalteten gedruckten Zeichen sowie Mittel zum Empfang mindestens einer optischen Ablichtung einer Seite oder eines Seitenabschnittes einer Seite, wobei die Seite oder der Seitenabschnitt mindestens zwei Zeichengruppen enthält. Darüber hinaus weist das System und/oder der Server Mittel zur Texterkennung und/oder Mittel zur optischen Erfassung einer Seite oder eines Seitenabschnittes einer Seite auf, wobei die Seite oder der Seitenabschnitt mindestens zwei Zeichengruppen enthält. Alternativ und/oder zusätzlich weist das System oder der Server Mittel zum Empfangen eines Textes, enthaltend Zeichengruppierungen und zumindest relative Positionsangaben zu den Zeichengruppierungen auf. Darüber hinaus weist das System oder der Server Mittel zur Anzeige und/oder Übermittlung von über die digitale Datensammlung oder unter Nutzung der Informationen der digitalen Datensammlung verknüpften Informationen auf. Dabei ist der Server oder das System eingerichtet, ein erfindungsgemäßes Verfahren auszuführen. Wie schon in Bezug auf das Verfahren ausgeführt kann es sich auch bei dem System nicht nur um ein System zur Ermittlung und/oder Wiedergabe von Informationen handeln. Das System kann auch eingerichtet sein zur Ansteuerung oder Gewährung von Rabatten oder anderen oben in Bezug auf das Verfahren ausgeführten Schritten, Zielen bzw. Ergebnissen. Auch die weiteren Erläuterungen in Bezug auf das Verfahren lassen sich entsprechend übertragen. Auch die vorteilhaften Merkmale des Verfahrens bieten Vorteile, sofern sie im System oder Server implementiert sind. The object is also achieved by a system or server for transmitting and / or reproducing information, comprising a server and a digital data collection containing information on the printed characters contained on printed pages and means for receiving at least one optical illumination of a page or a page portion of a page , where the page or page section contains at least two character groups. In addition, the system and / or the server has means for text recognition and / or means for optically detecting a page or a page section of a page, wherein the page or the page section contains at least two character groups. Alternatively and / or additionally, the system or the server comprises means for receiving a text comprising character groupings and at least relative position information to the character groupings. In addition, the system or server includes means for displaying and / or communicating information associated with the digital data collection or using the digital data collection information. In this case, the server or the system is set up to carry out a method according to the invention. As already stated with respect to the method, the system may not be just a system for detecting and / or reproducing information. The system may also be arranged to trigger or grant rebates or other steps, goals, or results outlined above with respect to the method. The further explanations with respect to the method can be transferred accordingly. Also, the advantageous features of the method offer advantages if they are implemented in the system or server.

Gelöst wird die Aufgabe auch durch einen Datenträger aufweisend eine Software, eingerichtet zur Durchführung eines erfindungsgemäßen Verfahrens. The object is also achieved by a data carrier having a software set up for carrying out a method according to the invention.

ZITATE ENTHALTEN IN DER BESCHREIBUNG QUOTES INCLUDE IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant has been generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturCited patent literature

DE 102013019675 B3 [0002]
US 2007/0019864 A1 [0002]
DE 102012008512 A1 [0003]

Claims

Method for transmitting and / or reproducing information, wherein a. at least one page or page portion of a page is optically captured, or an optical illumination of a page or a page portion of a page is received, the page or page portion including at least two words, and text recognition of characters included on the page or page portion is performed receiving a set of recognized character groupings which is believed to at least partially correspond and / or resemble the containing words, or a text containing character groupings and at least relative position information to the character groupings, and b. from at least one digital data collection containing information on printed pages contained on printed pages on the basis of at least one comparison of the character groups with digital data collection information to printed pages contained printed characters at least one printed page from the digital data collection is determined as a candidate as many as possible Initial selection of recognized or received character groupings and c. at least one second comparison for determining a probability value or a probability ranking of at least one evaluation candidate from the at least one candidate, for the probability with which the optically detected side or the optical illumination underlying page to a copy of the at least one evaluation candidate or the the optically acquired page section is performed around a section of a copy of the at least one evaluation candidate or the received text with position information about the at least one evaluation candidate matching text and position information is performed, and d. the information reproduced and / or transmitted via the digital data collection or information using the digital data collection information is reproduced and / or transmitted when the probability value exceeds a predetermined limit, and the omission of transmission and / or the at least one most likely candidate is evaluated; or reproducing from the digital data collection or information associated with the at least one candidate for which the highest likelihood has been determined, when the probability value falls below a predetermined limit, characterized in that e. the second comparison comprises a comparison in which a selection of combinatorially possible pairs of a character grouping selection of the recognized or received character groupings is formed, and f. determines the relative positions of the character groupings respectively contained in the selection of combinatorially possible pairs and searches, for each pair of the selection, a reference character group pair matching the character groupings of the pair in the at least one evaluation candidate for the relative position of the contained character groupings according to predetermined criteria or from the at least one evaluation candidate for each pair of combinatorially possible pair selection is determined at least one printed character reference pair pair from an evaluation candidate printed page containing the character groupings of the respective pair of combinatorially possible pair selection and the relative positions of the printed ones Characters in the reference character groups are determined on the printed page designated as the evaluation candidate, and from the reference character group pairs to j a pair of combinatorially possible pairs is searched for in each pair matching the pair of combinatorially possible pairs with respect to the relative position according to predetermined criteria, and g. for the at least one evaluation candidate, an evaluation value is determined which specifies to how many of the pairs contained in the selection of the combinatorially possible pairs in which at least one evaluation candidate was found according to the given criteria with respect to the relative position at least one matching reference character group pair and that the probability value and / or the probability ranking is based on the evaluation value of the at least one evaluation candidate.

The method of claim 1, wherein the selection of combinatorially possible pairs of a character grouping selection includes at least one character and / or at least one character string included in the printed characters of the evaluation candidate and / or candidate and / or in the received text and / or in the set of recognized character groupings each time a maximum of 5 times, especially a maximum of 3 times, occurs.

Method according to one of the preceding claims, wherein the initial selection comprises all character groupings and / or the selection of combinatorially possible pairs of all combinatorially possible pairs and / or the character grouping selection comprises all character groupings.

The method of any one of the preceding claims, wherein the initial selection comprises all character groupings of the character grouping selection.

Method according to one of the preceding claims, wherein in each case a matching reference pair of groups with respect to the relative position of the containing character groupings according to predetermined criteria is given by whether the arrangement of the reference character groups matches as arranged in the same or another line of the text.

A method according to any one of the preceding claims, wherein each reference character group matching the relative position of the containing character groupings according to predetermined criteria is given by whether the relative arrangement has a tolerance of up to 5% of the total dimension of the optical image, the received text and / or the printed page and / or two letter heights and / or two letter widths.

Method according to one of the preceding claims, wherein in each case a matching reference group pair with respect to the relative position of the containing character groupings according to predetermined criteria is given by whether the order of the character groups and reference character groups coincides in the reading direction.

Method according to one of the preceding claims, wherein in each case a matching relative to the position of the containing character groups according to predetermined criteria reference character group is given by whether the arrangement of the character groups and reference character groups in categories such as above or below and / or right or left match.

A system or server for transmitting and / or displaying information, comprising a server and a digital data collection containing printed character information on printed pages, and means for receiving at least one optical illumination of a page or a page portion of a page, the page or page portion contains at least two groups of characters, and means for text recognition and / or means for optically capturing a page or a page portion of a page, wherein the page or the page section contains at least two groups of characters and / or to receive a text containing character groupings and at least relative position information to the Character groupings and means for displaying and / or communicating information linked via the digital data collection or using the digital data collection information, the server being arranged, a method according to any one of the preceding n execute claims.

A data carrier comprising software set up to carry out a method according to one of Claims 1 to 8.