DE102016108403A1

DE102016108403A1 - Method for data transmission

Info

Publication number: DE102016108403A1
Application number: DE102016108403.4A
Authority: DE
Inventors: Anmelder Gleich
Original assignee: Individual
Current assignee: Individual
Priority date: 2016-05-06
Filing date: 2016-05-06
Publication date: 2017-11-09

Abstract

Die Erfindung betrifft ein Verfahren zur Datenübertragung einer Ausgangsdatei von einem Sender an einen Empfänger über das Internet. Das Verfahren umfasst die Schritte: Zerlegen der Ausgangsdatei in einzelne Bitfolgen, Vergleichen der einzelnen Bitfolgen mit in einer ersten Referenzdatei gespeicherten Referenz-Bitfolgen, denen jeweils ein Referenz-Index zugeordnet ist, Übernahme des jeweiligen Referenzindex als Index für die jeweilige Bitfolge, Zusammenfassen der Indizes zu einer Indexdatei, Übermitteln der Indexdatei an den Empfänger, Bestimmen übereinstimmender Indizes von in der übermittelten Indexdatei gespeicherten Indizes mit Referenzindizes einer zweiten Referenzdatei, und sequentielles Zusammenfügen von Referenz-Bitfolgen der zweiten Referenzdatei, die zu den übereinstimmenden Indizes korrespondieren, zu einer Zieldatei derart, dass die Zieldatei der Ausgangsdatei entspricht.The invention relates to a method for data transmission of an output file from a transmitter to a receiver via the Internet. The method comprises the steps: decomposing the output file into individual bit sequences, comparing the individual bit sequences with reference bit sequences stored in a first reference file, each of which is assigned a reference index, taking over the respective reference index as an index for the respective bit sequence, combining the indices to an index file, transmitting the index file to the receiver, determining matching indexes of indexes stored in the transmitted index file with reference indexes of a second reference file, and sequentially assembling reference bit sequences of the second reference file corresponding to the matching indexes to a target file such that the destination file corresponds to the source file.

Description

Die Erfindung betrifft ein Verfahren zur Datenübertragung einer Ausgangsdatei von einem Sender an einen Empfänger über das Internet.The invention relates to a method for data transmission of an output file from a transmitter to a receiver via the Internet.

Nach heutigem Stand der Technik muss der komplette Datensatz zweimal transferiert werden. Zuerst werden die zu übertragenen Daten vom Sender in das Internet übertragen – also hochgeladen, um dann vom Empfänger aus dem Internet heruntergeladen bzw. empfangen zu werden. Das bedeutet, dass sowohl der Sender als auch der Empfänger die benötigte Zeit investieren müssen, um die kompletten Dateien zur Verfügung zu stellen bzw. zu erhalten.According to the current state of the art, the complete data record has to be transferred twice. First, the data to be transmitted is transmitted from the sender to the Internet - that is, uploaded to be downloaded and received by the receiver from the Internet. This means that both the sender and the receiver need to invest the time needed to make the complete files available.

Das Problem besteht dabei insbesondere darin, dass die Ausgangsdateien – also Datensätze, Dateien und sonstige Informationen – immer größer werden. Daraus folgt, dass auch der Zeitaufwand für die Bereitstellung sowie für und das Empfangen und Speichern der Daten insbesondere also deren Up- und Download zunehmend größer wird.The problem is, in particular, that the source files - ie records, files and other information - are getting bigger. It follows that also the time required for the provision as well as for and receiving and storing the data, in particular their upload and download becomes increasingly larger.

Der vorliegenden Erfindung liegt daher die Aufgabe zugrunde, die oben genannten Nachteile zu reduzieren und ein Verfahren bereitzustellen, das eine vereinfachte und insbesondere schnellere Datenübertragung über das Internet ermöglicht.The present invention is therefore based on the object to reduce the above-mentioned disadvantages and to provide a method which enables a simplified and in particular faster data transmission over the Internet.

Diese Aufgabe wird gemäß der Erfindung dadurch gelöst, dass das Verfahren die folgenden Schritte umfasst:

– Zerlegen der Ausgangsdatei in einzelne Bitfolgen,
– Vergleichen der einzelnen Bitfolgen mit in einer ersten Referenzdatei gespeicherten Referenz-Bitfolgen, denen jeweils ein Referenz-Index zugeordnet ist,
– Übernahme des jeweiligen Referenzindex als Index für die jeweilige Bitfolge,
– Zusammenfassen der Indizes zu einer Indexdatei,
– Übermitteln der Indexdatei an den Empfänger,
– Bestimmen übereinstimmender Indizes von in der übermittelten Indexdatei gespeicherten Indizes mit Referenzindizes einer zweiten Referenzdatei, und
– sequentielles Zusammenfügen von Referenz-Bitfolgen der zweiten Referenzdatei, die zu den übereinstimmenden Indizes korrespondieren, zu einer Zieldatei derart, dass die Zieldatei der Ausgangsdatei entspricht.

This object is achieved according to the invention in that the method comprises the following steps:

- decomposing the output file into individual bit sequences,
Comparing the individual bit sequences with reference bit sequences stored in a first reference file, to each of which a reference index is assigned,
- adoption of the respective reference index as index for the respective bit sequence,
- combining the indices into an index file,
- transmitting the index file to the recipient,
Determining matching indexes of indexes stored in the transmitted index file with reference indexes of a second reference file, and
- sequentially joining reference bit sequences of the second reference file that correspond to the matching indexes to a target file such that the target file corresponds to the output file.

Durch das vorliegende Verfahren wird erreicht, dass das Volumen der zu übermittelten Ausgangsdatei durch die Umwandlung in eine dem Datensatz entsprechende Indexdatei deutlich verringert wird und so nicht mehr der gesamte ursprüngliche Datensatz übertragen werden muss, was eine deutliche Zeitersparnis zur Folge hat. Ein weiterer Vorteil besteht darin, dass die erhaltene Indexdatei lediglich einmal generiert werden muss und dann beliebig oft verwendet werden kann. Bei dem erfindungsgemäßen Verfahren wird also nicht die komplette Ausgangsdatei übertragen, sondern diese vielmehr in Bitfolgen bzw. Datenpakete einer bestimmten Größe aufgeteilt, denen dann wiederum jeweils ein Index zugeordnet wird, der dem Referenzindex der in der Referenzdatei (Dump-File) hinterlegten Referenzbitfolge entspricht. In der Referenzdatei sind dabei fortlaufende Binärzahlen hinterlegt, wobei jeder Datensatz der Referenzdatei einer Folge von Binärzahlen mit einer festen Größe entspricht und eine Referenz-Bitfolge darstellt. Die Datensätze der Referenzdatei sind dabei fortlaufend indiziert. Die zu der Indexdatei zusammengefassten Indizes werden dann über das Internet an den Empfänger übermittelt. Je nach Länge der Bitfolgen, denen ein Index zugeordnet wird, ist die Indexdatei wesentlich kleiner als die Ausgangsdatei. Der Empfänger der Indexdatei kann die in der Indexdatei hinterlegten Indizes mit Hilfe eines Vergleichs mit Referenzindizes, die in der zweiten Referenz-Datei gespeicherten sind, zu der Zieldatei umbilden, die der Ausgangsdatei entspricht. Hierzu werden die zu den jeweiligen Referenzindizes korrespondierenden Referenz-Bitfolgen sequentiell zusammengesetzt.By means of the present method it is achieved that the volume of the output file to be transmitted is significantly reduced by the conversion into an index file corresponding to the data record and thus the entire original data record no longer has to be transmitted, which results in a significant time saving. Another advantage is that the resulting index file only has to be generated once and then used as often as required. In the method according to the invention, therefore, the complete output file is not transmitted, but rather split into bit sequences or data packets of a specific size, to which in turn an index corresponding to the reference index of the reference bit sequence stored in the reference file (dump file) is assigned. In the reference file, consecutive binary numbers are stored, whereby each data record of the reference file corresponds to a sequence of binary numbers with a fixed size and represents a reference bit sequence. The data records of the reference file are indexed continuously. The indexes combined into the index file are then transmitted to the recipient via the Internet. Depending on the length of the bit sequences to which an index is assigned, the index file is much smaller than the source file. The recipient of the index file can transform the indexes stored in the index file to the target file corresponding to the source file by means of a comparison with reference indexes stored in the second reference file. For this purpose, the reference bit sequences corresponding to the respective reference indices are combined sequentially.

Als günstig hat es sich auch erwiesen, wenn ein Indexer vorgesehen ist, der die Ausgangsdatei in die Indexdatei umwandelt. Der Indexer zerteilt dabei die Ausgangsdatei in Bitfolgen einer vorgegebenen Länge. Vorzugsweise mit einer Größe, die zwischen einigen wenigen Bit und einigen KB oder sogar einigen MB liegt. Die zu übertragenden Dateien werden also mit Hilfe des Indexers beispielsweise in 100 MB große Bitfolgen aufgeteilt. Zu jeder Bitfolge wird dann der Referenzindex aus der Referenzdatei rechnerisch ermittelt. Durch die Aneinanderreihung der einzelnen Indizes entsteht letztlich die Indexdatei.It has also proved to be advantageous if an indexer is provided which converts the source file into the index file. The indexer divides the output file into bit sequences of a given length. Preferably, between a few bits and a few KB or even a few MB. For example, the files to be transferred are split into 100 MB bit sequences using the indexer. The reference index from the reference file is then computationally determined for each bit sequence. By lining up the individual indices, the index file is ultimately created.

Bewährt hat es sich weiterhin auch, wenn ein Merger vorgesehen ist zum Erzeugen der Zieldatei aus der Indexdatei. Hierdurch ist es für den Empfänger sehr komfortabel, aus der empfangenen Indexdatei die Zieldatei zu erzeugen. Die Indexdatei wird dabei über das Internet an den Empfänger gesendet. Der Empfänger, dem die zweite Referenzdatei vorliegt, die identisch mit der ersten Referenzdatei ist, nutzt den Merger, welcher auf Basis der referenzierten Datensätze der Indexdatei die korrespondierenden Referenzbitfolgen sequentiell aus der Referenzdatei (Dump-File) liest.It has also proven to be useful if a merger is provided for generating the target file from the index file. This makes it very convenient for the recipient to generate the target file from the received index file. The index file is sent over the Internet to the recipient. The receiver, which has the second reference file which is identical to the first reference file, uses the merger, which reads the corresponding reference bit sequences sequentially from the reference file (dump file) on the basis of the referenced index file records.

Als vorteilhaft hat es sich auch gezeigt, wenn ein Generator zum Erzeugen der Referenzdatei vorgesehen ist. Die Referenzdatei kann dann durch den Generator einmalig erstellt werden. Sie dient als Grundlage der Datenübertragung zwischen dem Sender und dem Empfänger. Da die Referenzdatei einheitlich generiert wird, kann sie von jedem Teilnehmer des Internets unabhängig voneinander erstellt werden, wenn dieser im Besitz eines entsprechenden Generators ist.It has also proven to be advantageous if a generator is provided for generating the reference file. The reference file can then be created once by the generator. It serves as the basis for data transmission between the sender and the receiver. Since the reference file is generated uniformly, it can be created by each participant of the Internet independently of each other, if it is in possession of a corresponding generator.

Als günstig hat es sich auch erwiesen, wenn die erste Referenzdatei und/oder die zweite Referenzdatei auf einem Datenträger oder auf einem Server lokal gespeichert sind. Somit ist es für den Empfänger möglich, die Referenzdatei beispielsweise als Medium einmalig zu erwerben, um dann nach dem Erhalt der Indexdatei aus der Referenzdatei die Zieldatei zu generieren. Als besonders vorteilhaft hat es sich in diesem Zusammenhang auch erwiesen, wenn die erste Referenzdatei bei dem Sender und/oder die zweite Referenzdatei bei dem Empfänger lokal gespeichert sind. Hierdurch wird es besonders einfach, die Daten zu übertragen. Auch lassen sich dann die Referenzdateien vor einem nicht berechtigten Zugriff Dritter leichter sichern. Im Rahmen der Erfindung hat es sich diesbezüglich besonderes auch bewährt, wenn die Referenzdatei in einem externen Speichermedium vorgehalten wird, das lediglich einen Lesezugriff ermöglich, wodurch Zugriff auf die Referenzdatei und damit deren Manipulation weiter erschwert wird.It has also proven to be favorable if the first reference file and / or the second reference file are stored locally on a data medium or on a server. Thus, it is possible for the recipient to purchase the reference file as a medium, for example, only to then generate the target file after receiving the index file from the reference file. In this context, it has also proven to be particularly advantageous if the first reference file at the transmitter and / or the second reference file are stored locally at the receiver. This makes it very easy to transfer the data. Also, the reference files can then be easily secured against unauthorized access by third parties. In the context of the invention, it has also proven particularly useful in this regard, if the reference file is kept in an external storage medium, which allows only a read access, whereby access to the reference file and thus their manipulation is further complicated.

Als günstig hat es sich weiterhin auch gezeigt, wenn die Ausgangsdatei durch einen Senderrouter auf einen Server geleitet wird, auf dem die Index-Datei erzeugt wird, und dass ein Empfängerrouter vorgesehen ist, um die Index-Datei zu empfangen. Durch die Router, von denen einer dem Sender und der andere dem Empfänger zugeordnet ist, lassen sich die Daten einfach und sicher übertragen.It has also been shown to be beneficial if the source file is passed through a sender router to a server on which the index file is generated, and that a receiver router is provided to receive the index file. Through the routers, one of which is assigned to the sender and the other to the receiver, the data can be transmitted easily and securely.

Im Rahmen der Erfindung ist es zudem auch vorgesehen, dass die Index-Datei Teil einer öffentlichen Web-Seite ist, die vorzugsweise nur eine gewisse Zeit existiert. Hierdurch wäre es beispielsweise möglich, auch Fernsehsendungen zu empfangen.In the context of the invention, it is also provided that the index file is part of a public web page, which preferably only exists for a certain time. This would make it possible, for example, to receive TV broadcasts as well.

Im Folgenden wird die Erfindung an einem in der Zeichnung dargestellten Ausführungsbeispiel näher erläutert; es zeigt:In the following the invention will be explained in more detail in an embodiment shown in the drawing; it shows:

1 ein Ablaufdiagramm des erfindungsgemäßen Verfahrens. 1 a flow diagram of the method according to the invention.

Das erfingungsgemäße Verfahren wird anhand des in der 1 gezeigten ein Ausführungsbeispiels im Folgenden näher beschrieben. Eine Ausgangsdatei – beispielsweise eine Filmdatei – wird durch einen Indexer in eine Reihe von Bitfolgen zerlegt, die allesamt eine einheitliche Größe von 100 MB aufweisen. Durch einen Vergleich mit Referenzbitfolgen, denen jeweils ein Referenzindex zugeordnet ist und die in einer ersten Referenzdatei hinterlegt sind, wird den Bitfolgen jeweils ein Index zugeordnet und die einzelnen Indizes in einer Index-Datei zusammengefasst. Die erste Referenzdatei wurde dabei zuvor von einem Generator aufgebaut und ist in dem gezeigten Ausführungsbeispiel lokal bei dem Versender gespeichert. Die Referenzdatei – auch als Dump-File bezeichnet – besteht aus fortlaufenden Binärzahlenkombinationen, die durch die Referenzindizes fortlaufend nummeriert sind. Die Größe der einzelnen Bitkombinationen ist in dem gezeigten Ausführungsbeispiel auf 100 MB festgelegt.The erfingungsgemäße method is based on the in the 1 shown an embodiment described in more detail below. An output file, such as a movie file, is decomposed by an indexer into a series of bit strings, all of which are 100 MB in size. By comparison with reference bit sequences, each of which is assigned a reference index and which are stored in a first reference file, the bit sequences are each assigned an index and the individual indices are combined in an index file. The first reference file was previously constructed by a generator and is locally stored at the sender in the embodiment shown. The reference file - also referred to as a dump file - consists of consecutive binary number combinations that are consecutively numbered by the reference indices. The size of the individual bit combinations is set to 100 MB in the embodiment shown.

Jeder Datensatz der durch den Indexer zerlegten Ausgangsdatei entspricht also einer bestimmten Binärzahlenkombination. Gleichzeitig findet sich zu jeder Binärzahlenkombination ein entsprechender Eintrag in der Referenzdatei, der ein eigener Referenzindex zugeordnet ist. Das bedeutet, dass jeder Datensatz der zerlegten Ausgangsdatei in der Referenzdatei enthalten ist. Jede Bitfolge der Ausgangsdatei bekommt dann den korrespondierenden Referenzindex als eigenen Index zugeordnet.Each record of the output file decomposed by the indexer thus corresponds to a specific combination of binary numbers. At the same time, there is a corresponding entry in the reference file for each combination of binary numbers to which a separate reference index is assigned. This means that each record of the decomposed source file is contained in the reference file. Each bit sequence of the output file is then assigned the corresponding reference index as its own index.

In dem gezeigten Ausführungsbeispiel, in dem die Ausgangsdatei eine Film-Datei mit einer beispielhaften Ausgangsgröße von 2 GB bildet, wird diese in rund in mehrere Blöcke mit einer Größe von jeweils 100 MB aufgeteilt. Zu jedem dieser Blöcke, in diesem Beispiel 20 Stück, wird durch den Indexer der Referenzindex zugeordnet, der dem jeweiligen Datenblock von 100 MB aus der Referenzdatei entspricht. Die 20 einzelnen Indexnummern werden dann in einer Indexdatei zusammengefasst, deren Größe deutlich kleiner ist als die Ausgangsdatei, und über das Internet dem Empfänger übermittelt. Durch die jetzt relativ kleine Datenmenge ist die Übertragungszeit erheblich gesunken.In the embodiment shown, in which the source file forms a movie file with an exemplary 2 GB output size, it is split into approximately 100 MB size blocks in approximately one round. For each of these blocks, in this example 20 pieces, the indexer assigns the reference index which corresponds to the respective data block of 100 MB from the reference file. The 20 individual index numbers are then combined in an index file whose size is significantly smaller than the original file, and transmitted via the Internet to the recipient. Due to the now relatively small amount of data, the transmission time has dropped significantly.

Der Empfänger, der eine zweite Referenzdatei lokal gespeichert hat, nutzt die übermittelte Indexdatei mit Hilfe eines Mergers, um die ursprüngliche Film-Datei an Ort und Stelle zu erzeugen. Das heißt, der Merger nutzt die Referenzindizes der zweiten Referenzdatei, um die benötigten 100 MB großen Datensätze in der richtigen Reihenfolge aus der zweiten Referenzdatei (Dump-File) herauszulesen und zur Zieldatei – also dem Film – zusammenzusetzen, die dem Sender in dieser Form vorliegt.The recipient, who has stored a second reference file locally, uses the transmitted index file with the help of a merger to create the original movie file on the spot. That is, the merger uses the reference indexes of the second reference file to extract the required 100 MB records in the correct order from the second reference file (dump file) and to assemble them into the destination file - the movie - that the sender has in this form ,

Claims

Method for data transmission of an output file from a transmitter to a receiver via the Internet, comprising the steps of: - decomposing the output file into individual bit sequences, - comparing the individual bit sequences with reference bit sequences stored in a first reference file, each of which is assigned a reference index , - taking over of the respective reference index as an index for the respective bit sequence, - combining the indexes into an index file, - transmitting the index file to the recipient, Determining matching indexes of indexes stored in the transmitted index file with reference indexes of a second reference file, and sequentially assembling reference bit sequences of the second reference file corresponding to the matching indexes to a destination file such that the destination file corresponds to the source file.

A method according to claim 1, characterized in that an indexer is provided, which converts the output file into the index file.

A method according to claim 1 or 2, characterized in that a merger is provided for generating the target file from the index file.

Method according to one of claims 1 to 3, characterized in that a generator for generating the first reference file and / or the second reference file is provided.

Method according to one of claims 1 to 4, characterized in that the first reference file and / or the second reference file are stored locally on a data carrier or on a server.

Method according to one of claims 1 to 5, characterized in that the source file is passed through a sender router to a server on which the index file is generated, and that a receiver router is provided to receive the index file.

Method according to one of claims 1 to 6, characterized in that the index file is stored on a public web page.

A method according to claim 7, characterized in that the index file is retrievable only a predetermined time.