DE10033110A1 - Verfahren, und System zur Übertragung digitalisierter Bewegtbilder von einem Sender zu einem Empfänger und zugehöriger Decoder - Google Patents
Verfahren, und System zur Übertragung digitalisierter Bewegtbilder von einem Sender zu einem Empfänger und zugehöriger DecoderInfo
- Publication number
- DE10033110A1 DE10033110A1 DE10033110A DE10033110A DE10033110A1 DE 10033110 A1 DE10033110 A1 DE 10033110A1 DE 10033110 A DE10033110 A DE 10033110A DE 10033110 A DE10033110 A DE 10033110A DE 10033110 A1 DE10033110 A1 DE 10033110A1
- Authority
- DE
- Germany
- Prior art keywords
- receiver
- image data
- data stream
- transmitter
- moving images
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 30
- 230000005540 biological transmission Effects 0.000 claims abstract description 49
- 230000006978 adaptation Effects 0.000 claims abstract description 28
- 238000012546 transfer Methods 0.000 claims description 9
- 238000012545 processing Methods 0.000 abstract description 3
- 238000000638 solvent extraction Methods 0.000 description 9
- 239000013598 vector Substances 0.000 description 6
- 238000005192 partition Methods 0.000 description 5
- 102100027287 Serpin H1 Human genes 0.000 description 4
- 238000011161 development Methods 0.000 description 4
- 230000018109 developmental process Effects 0.000 description 4
- 238000012549 training Methods 0.000 description 4
- 101100025317 Candida albicans (strain SC5314 / ATCC MYA-2876) MVD gene Proteins 0.000 description 3
- 101000836383 Homo sapiens Serpin H1 Proteins 0.000 description 3
- 101150079299 MVD1 gene Proteins 0.000 description 3
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 2
- 101000969688 Homo sapiens Macrophage-expressed gene 1 protein Proteins 0.000 description 1
- 101150020780 MVD2 gene Proteins 0.000 description 1
- 102100021285 Macrophage-expressed gene 1 protein Human genes 0.000 description 1
- 108010038679 colligin Proteins 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 238000012913 prioritisation Methods 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234327—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
- H04L65/612—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
- H04L65/613—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for the control of the source by the destination
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/65—Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/70—Media network packetisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/80—Responding to QoS
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
- H04N19/37—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability with arrangements for assigning different transmission priorities to video input data or to video coded data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
- H04N19/89—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
- H04N21/2381—Adapting the multiplex stream to a specific network, e.g. an Internet Protocol [IP] network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/643—Communication protocols
- H04N21/6437—Real-time Transport Protocol [RTP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/1066—Session management
- H04L65/1101—Session protocols
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Detection And Prevention Of Errors In Transmission (AREA)
Abstract
Es wird ein Verfahren zur Übertragung digitalisierter Bewegtbilder (Bilddatenstrom) von einem Sender zu einem Empfänger angegeben. Anhand einer Anpassungsschicht beim Sender wird der in Prioritätsklassen unterteilte Bilddatenstrom mittels eines vorgegebenen Protokolls zu dem Empfänger übertragen. Bei einer Anpassungsschicht des Empfängers werden Übertragungsfehler bestimmt, einer Fehlerbehandlung unterzogen und einem Bilddecoder zugeführt.
Description
Die Erfindung betrifft ein Verfahren und ein System zur
Übertragung digitalisierter Bewegtbilder von einem Sender zu
einem Empfänger. Weiterhin betrifft die Erfindung einen
zugehörigen (Bild-)Decoder.
Ein Verfahren zur Bearbeitung digitalisierter Bilddaten,
insbesondere ein Bildkompressionsverfahren ist dem Fachmann
bekannt (siehe zum Beispiel die Bildkompressionsstandards
MPEG-2, MPEG-4 oder H.26x).
In diesem Zusammenhang ist es ferner bekannt, den
Bilddatenstrom, der die Folge digitalisierter Bewegtbilder
enthält, von einem Sender zu einem Empfänger derart zu
übertragen, dass die Information mit hohem Informationsgehalt
zuerst übertragen wird. Dies geschieht zweckmäßig durch die
Verwendung sogenannter Prioritätsklassen, anhand derer der
Informationsgehalt der Folge von Bewegtbildern klassifiziert
wird. Eine Übertragung der Bilddaten entsprechend ihrer
Prioritätsklassen ermöglicht es somit, in dem Bilddatenstrom
Daten mit hohem Informationsgehalt zuerst zum Empfänger zu
übertragen. Details sind den Schriften [1], [2] oder [3]
entnehmbar.
Weiterhin ist ein sogenanntes Realtime-Transport-Protokoll
(RTP) bekannt. RTP-Protokolle sind anwendungsspezifische
Protokolle für Echtzeit-Applikationen wie Audio und/oder
Video und stellen Funktionen für Datentypidentifikation,
Paketnummerierung, und Zeitmarkenüberwachung bereit. Diese
Protokolle werden von der Internet Engineering Task Force
(IETF) standardisiert, Beispiele für MPEG-1, MPEG-2 und H.263
sind in [4] oder [5] enthalten.
Bei der Bildverarbeitung ist es ferner bekannt, die einzelnen
Bildblöcke in Makroblöcke zusammenzufassen und insbesondere
mehrere zusammenhängende Makroblöcke als einen sogenannten
"Slice" zu bezeichnen. Beispielsweise können mehrere
Makroblockzeilen oder eine bildobjektbezogenes Bildsegment zu
einem Slice zusammengefasst werden [6].
Nun ist es ein Problem des Standes der Technik, dass bei der
Übertragung auf fehlerbehafteten Kanälen ein
Übertragungsfehler von dem Decoder zunächst nicht bemerkt
wird und der decodierte Fehler sich bei der Darstellung der
Folge von Bewegtbildern fortpflanzt. Dies führt zu
signifikanten Qualitätseinbußen im dargestellten Videobild.
Die Aufgabe der Erfindung besteht darin, die
Fehlerfortpflanzung in den Videobildern nahezu ganz zu
unterbinden.
Diese Aufgabe wird gemäß dem Merkmalen der unabhängigen
Patentansprüche gelöst. Weiterbildungen der Erfindungen
ergeben sich auch aus den abhängigen Ansprüchen.
Zur Lösung der Aufgabe wird zunächst ein Verfahren zur
Übertragung digitalisierter Bewegtbilder von einem Sender zu
einem Empfänger angegeben, bei dem die digitalisierten
Bewegtbilder beim Sender als ein Bilddatenstrom vorliegen.
Der Bilddatenstrom wird in Prioritätsklassen unterteilt.
Anhand einer Anpassungsschicht beim Sender wird der in
Prioritätsklassen unterteilte Bilddatenstrom mittels eines
vorgegebenen Protokolls zu dem Empfänger übertragen. Bei
einer Anpassungsschicht des Empfängers werden, falls
vorhanden, Übertragungsfehler bestimmt. Die festgestellten
Übertragungsfehler werden beim Empfänger einer
Fehlerbehandlung unterzogen. Der fehlerbehandelte
Bilddatenstrom wird einem Bilddecoder (beim Empfänger)
zugeführt. Somit kann die übertragene Folge digitalisierter
Bewegtbilder beim Empfänger dargestellt werden.
Dieses Verfahren hat den Vorteil, dass transparent für einen
standardisierten Bilddecoder ein Dienst "Fehlerbehandlung"
erbracht wird, der verhindert, dass sich ein Fehler im
Übertragungskanal in der Darstellung der digitalisierten
Bewegtbilder fortpflanzt und es somit zu den erwähnten
Qualitätseinbußen kommt. Vielmehr stellt die Fehlerbehandlung
gemäß obigem Verfahren sicher, dass ein solcher Fehler
erkannt und entsprechend behandelt wird, so dass es nicht zu
der erwähnten Fortpflanzung der Fehler in den Bewegtbildern
kommt.
Eine besonders vorteilhafte Wirkung ergibt sich aus der
Kombination der Unterteilung in Prioritätsklassen und der
Übertragung anhand der Anpassungsschicht. Damit ist
gewährleistet, dass die Daten in dem Bilddatenstrom
priorisiert vom Sender zum Empfänger übertragen werden, so
dass beim Empfänger diejenigen Daten mit dem größten
Informationsgehalt zuerst eintreffen. Dadurch ist
gewährleistet, dass zunächst die Bewegtbilder beim Empfänger
in einer gewissen Mindestqualität darstellbar sind. Die
weiteren zu übertragenden Daten dienen insbesondere der
sukzessiven Qualitätsverbesserung, so dass bei einem
Übertragungsfehler zu diesem Zeitpunkt sichergestellt ist,
dass zumindest die vorher übertragenen Bilddaten nutzbar sind
und sich der Übertragungsfehler nicht auf die nachfolgend
übertragenen Bilder auswirkt.
Hierbei sei angemerkt, dass vorzugsweise ab Eintritt eines
Fehlers alle Bilddaten des Bilddatenstroms, die zu eben
diesem Bild innerhalb der Folge der Bewegtbilder gehören,
verworfen werden können. Entsprechend kann, falls diese
(verworfenen) Bilddaten für die Rekonstruktion eines
Interbildes notwendig sind, vereinbart werden, dass eine
Rekonstruktion nicht anhand der offensichtlich fehlerhaften
Daten erfolgt. Eine Möglichkeit der Fehlerbehandlung besteht
darin, pro synchronisiertem Bild ab Eintritt eines Fehlers
die nachfolgenden Daten für dieses Bild zu verwerfen.
Beispielsweise können Daten einer Partition, die noch keinen
Fehler aufweisen, bis zu dem erkannten Fehler für die
Fehlerbehandlung und die Dekodierung herangezogen werden. Die
Fehlerbehandlung kann auch darin bestehen, dass die
fehlerhaften Daten verworfen werden.
Geht ein Paket, das eine Prioritätsklasse oder einen Teil
davon beinhaltet bei der Übertragung über ein Netz verloren,
wird dies durch die Anpassungsschicht bemerkt. Daraufhin wird
eine entsprechende Fehlerbehandlung eingeleitet. Der Verlust
des Pakets wird beispielsweise durch Einsatz des RTP-
Protokolls bemerkt; die Fehlerbehandlung erfolgt durch
Verwerfen von Daten.
Insbesondere wird hierbei von Paketverlusten ausgegangen;
demnach kommt also ein Paket an oder es ist bei der
Übertragung (im Netzwerk) verloren gegangen. Somit sind die
Informationen dieses Pakets nicht vorhanden. Eine mögliche
Fehlerbehandlung könnte beispielsweise darin bestehen, für
die Bewegungsschätzung eine Interpolation von
Bewegungsvektoren zwischen einer letzten fehlerfrei
dekodierbaren Bewegungsvektorklasse und einer nächsten
fehlerfreie dekodierbaren Bewegungsvektorklasse sein. Im
Falle eines Verlusts eines Pakets mit hohem
Informationsgehalt könnte auch ein komplettes Bild verworfen
werden.
Eine Weiterbildung besteht darin, dass mehrere Empfänger als
Adressaten für den Bilddatenstrom vorgesehen sind.
Durch Trennung der Partitionen durch Synchronisations
markierungen oder Partitionstabelle soll nach einem
Übertragungsfehler sichergestellt werden, dass sich der
Decoder nach Detektion eines Folgefehlers wiederum auf den
Bilddatenstrom synchronisieren kann. Dies ist Bestandteil des
H.263 und MPEG-4-Standards.
Daten werden im Fehlerfall insbesondere bis zur nächsten
erkannten Partitionsgrenze verworfen. Durch die entsprechende
Priorisierung der einzelnen Informationsgehalte soll
sichergestellt sein, dass wichtige Informationen mit weitaus
geringerer Wahrscheinlichkeit verloren gehen als Daten
(Pakete) mit geringem Informationsgehalt. Somit wird
sichergestellt, dass insbesondere eine gewisse Mindesqualität
des Bildes bzw. der Folge von Bewegtbilder darstellbar ist.
Eine andere Weiterbildung besteht darin, dass anhand der
Prioritätsklassen eine Sortierung der Daten der Bewegtbilder
derart erfolgt, dass diejenigen Daten mit dem größten
Informationsgehalt zuerst innerhalb des Bilddatenstroms von
dem Sender zum Empfänger übertragen werden. Dadurch wird, wie
bereits oben erwähnt, sichergestellt, dass die Daten mit dem
größten Informationsgehalt (für jedes Bild der Folge von
Bewegtbildern, das heißt für jede synchronisierbare Einheit)
zuerst übertragen werden. Nachfolgend werden (gestaffelt)
jeweils unwichtigere Daten übertragen, die eine sukzessive
Verbesserung der Bildqualität gewährleisten. Sollte sich der
Fehler innerhalb dieser Daten abspielen, so ist das Videobild
trotzdem in ausreichender Qualität erkennbar, die innerhalb
der aktuellen synchronisierbaren Einheit nachfolgende
Information wird verworfen. Mit synchronisierbarer Einheit
ist damit gemeint der Bereich zwischen zwei
Synchronisationspunkten, ab denen jeweils wieder - auch bei
Auftreten eines Fehlers - die Daten des Bilddatenstroms
erneut berücksichtigt werden.
Eine andere Weiterbildung besteht darin, dass die
Anpassungsschicht unterschiedliche Protokolle für die
Übertragung von Sender zu Empfänger nutzt. Insbesondere ist
es möglich, dass sich die Anpassungsschicht entweder
paketvermittelnder Dienste oder verbindungsorientierter
Dienste bedient. Vorteilhaft bedient sich die
Anpassungsschicht der Dienstgütemerkmale des jeweiligen
Übertragungsprotokolls.
Insbesondere ist es ein Vorteil, wenn die Anpassungsschicht
mehrere Protokolle gleichzeitig nutzen kann bzw. wenn die
Anpassungsschicht mehrere Kanäle eines oder unterschiedlicher
Protokolle gleichzeitig nutzen kann.
Eine Ausgestaltung besteht darin, dass der Übertragungsfehler
bestimmt wird, indem von der Anpassungsschicht ein
fehlersensitives Protokoll eingesetzt wird. Insbesondere ist
solch ein fehlersensitives Protokoll ein RTP-Protokoll. Jedes
Paket das anhand einer Sequenznummer identifiziert werden
kann, kann hier als fehlersensitiv gelten, d. h. falls ein
Paket verlorengeht, fehlt auch die zugehörige Paketnummer.
Das ankommende Paket hat somit eine höhere Nummer als das
eigentlich erwartete. Damit kann der Fehler (hier:
Paketverlust) bemerkt werden.
Grundsätzlich kann aber auch jedes andere Protokoll
eingesetzt werden, das zumindest sicherstellt, dass
Übertragungsfehler bemerkt werden.
Auch ist es eine Ausgestaltung, dass die Übertragung
paketvermittelt und/oder verbindungsorientiert durchgeführt
wird.
Eine andere Ausgestaltung ist es, dass der Bilddecoder die
enthaltenen Bewegtbilder darstellt.
Insbesondere ist es ein Vorteil des beschriebenen Verfahrens,
dass ein standardmäßiger Bilddecoder eingesetzt werden kann,
für den transparent der Dienst "Fehlerbehandlung" erbracht
wird. Somit wird die Funktionalität des standardisierten
Decoders derart erweitert, dass dieser keinerlei
fortgepflanzte Übertragungsfehler mehr darstellt. Dies wird
durch die beschriebene Anpassungsschicht sichergestellt.
Eine Weiterbildung besteht auch darin, dass eine Gruppe von
zusammenhängenden Macroblöcken (Slice) durch eine Header-
Information in einer Prioritätsklasse adressierbar wird. Dies
hat insbesondere den Vorteil, dass eine Zusammenfassung von
mehreren (aufeinanderfolgenden) Macroblöcken (= Slice) als
Teil des Bilddatenstroms in Prioritätsklassen unterteilbar
sind. Dabei wird die logische Struktur des Slice auch bei der
Reihenfolge der Übertragung der Bilddaten innerhalb des
Bilddatenstroms berücksichtigt. Dies kann auf
unterschiedliche Art und Weise erfolgen. Eine Möglichkeit
besteht darin, die Slice-Information den Macroblock-
Typinformationen derjenigen Blöcke, die von dem Slice umfasst
sind, voranzustellen. Eine andere Möglichkeit ist es, eine
Slice-Tabelle vorzusehen, die eine Zuordnung der
Macroblocktypen bzw. Macroblöcke zu unterschiedlichen Slices
erlaubt. Eine dritte Möglichkeit besteht darin, die Slice-
Information direkt einer Untergeordneten Prioritätsklasse
zuzuordnen, beispielsweise den DCT-Koeffizienten, die für die
Macroblöcke kennzeichnend sind, die der Slice umfasst.
Insbesondere ist es eine Weiterbildung, dass der Bilddecoder
ein standardisierter Bilddecoder ist, der nach einem MPEG-
Standard oder einem H.26x-Standard arbeitet.
Weiterhin wird zur Lösung der Aufgabe ein Verfahren zur
Decodierung digitalisierter Bewegtbilder in einem Empfänger
angegeben. Dabei liegen die digitalisierten Bewegtbilder als
ein Bilddatenstrom vor. Der Bilddatenstrom wird in
Prioritätsklassen unterteilt. Anhand einer Anpassungsschicht
des Empfängers werden Übertragungsfehler bestimmt. Für die
Übertragungsfehler wird beim Empfänger eine Fehlerbehandlung
durchgeführt und der übertragene Fehler behandelte
Bilddatenstrom wird einem Bilddecoder zugeführt.
Zusätzlich wird zur Lösung der Aufgabe ein Bilddecoder
angegeben, der eine Prozessoreinheit aufweist, die derart
ausgeführt ist, dass
- a) die digitalisierten Bewegtbilder als ein Bilddatenstrom vorliegen;
- b) der Bilddatenstrom in Prioritätsklassen unterteilt ist;
- c) anhand einer Anpassungsschicht des Empfängers Übertragungsfehler bestimmbar sind;
- d) für die Übertragungsfehler beim Empfänger eine Fehlerbehandlung durchführbar ist und
- e) der übertragene fehlerbehandelte Bilddatenstrom einem Bilddecoder zuführbar ist.
Auch wird zur Lösung der Aufgabe ein System zur Übertragung
digitalisierter Bewegtbilder mit einem Sender und einem
Empfänger angegeben, bei dem die digitalisierten Bewegtbilder
beim Sender als ein Bilddatenstrom vorliegen. Der Sender
unterteilt den Bilddatenstrom in Prioritätsklassen. Der
Sender überträgt anhand einer Anpassungsschicht den in
Prioritätsklassen unterteilten Bilddatenstrom mittels eines
vorgegebenen Protokolls zu dem Empfänger. Der Empfänger
bestimmt anhand einer Anpassungsschicht Übertragungsfehler
und führt eine Fehlerbehandlung für die bestimmten
Übertragungsfehler aus. Beim Empfänger wird der übertragene
und fehlerbehandelte Bilddatenstrom einem Bilddecoder
zugeführt.
Das Verfahren zur Decodierung digitalisierter Bewegtbilder
ist insbesondere geeignet zur Durchführung einer der
vorstehend erläuterten Weiterbildungen.
Der Bilddecoder und das System zur Übertragung
digitalisierter Bewegtbilder sind insbesondere geeignet zur
Durchführung der beschriebenen Verfahren oder einer der
vorstehend erläuterten Weiterbildungen.
Ausführungsbeispiele der Erfindung werden nachfolgend anhand
der Zeichnungen dargestellt und erläutert.
Es zeigt
Fig. 1 eine Skizze eines Systems zur Übertragung
digitalisierter Bewegtbilder von einem Sender zu
einem Empfänger.
In Fig. 1 ist ein System zur Übertragung digitalisierter
Bewegtbilder mit einem Sender und einem Empfänger
dargestellt. Nachfolgend werden das System, der Bilddecoder
und ein Verfahren zur Übertragung digitalisiertet
Bewegtbilder von Sender zu Empfänger bzw. ein Verfahren zur
Decodierung erläutert.
Fig. 1 zeigt einen Encoder 101 zur Codierung von
Bewegtbildern. Die codierten Bewegtbilder sollen (möglichst
komprimiert, das heißt ressourcenschonend) zu einem Decoder
110 übertragen werden, wobei der Decoder 110 vorzugsweise
nach einem Codierungsstandard, zum Beispiel MPEG-4 oder
H.263, arbeitet. Hierzu ist eine Erweiterung in der
Protokollarchitektur vorgesehen, die die Blöcke 102 bis 104
auf der Seite des Encoders und die Blöcke 107 bis 109 auf der
Seite des Decoders umfasst. Diese Erweiterung in der
Protokollarchitektur verfolgt das Ziel, für den Decoder 110
transparent einen zusätzlichen Dienst zur Verfügung zu
stellen, nämlich einen fehlertoleranten und fehlerbehandelten
Bilddatenstrom bereitzustellen. Hierbei ist es zum einen von
Vorteil, dass die Übertragung über den Übertragungskanal (105
bzw. 106) unter Berücksichtigung von Prioritätsklassen
erfolgt, das heißt diejenige Information mit hohem
Informationsgehalt zuerst übertragen wird, und weiterhin die
Übertragungsfehler des Kanals erkannt und behandelt werden,
so dass der Decoder 110 keine Bit-Fehler erhält, die sich
über eine Folge von Bewegtbildern fortpflanzen und somit zu
signifikanten Einbußen in der Videoqualität führen.
Demgemäss erfolgt in einem Block 102 auf der Seite des
Encoders 101 die Partitionierung in Prioritätsklassen, das
heißt der Bilddatenstrom wird elementweise in
Prioritätsklassen geordnet. Ausgehend von einem
Bilddatenstrom, der beispielsweise von einem H.26L-
Bildencoder stammt, und folgende Gestalt hat
PSYNC|PTYPE|MB_TYPE1|MVD1|CBP1|LUM1|CHR_AC1|
CHR_DC1|MB_TYPE2|MVD2|CBP2|LUM2|CHR_AC2|CHR_DC2
. . .
wird eine Partitionierung in folgende Prioritätsklassen
durchgeführt:
- 1. PSYNC ("Picture Sync", Bildsynchronisation)
PTYPE ("Picture Type", Bildtyp) - 2. MB_TYPE1 . . . MB_TYPEn ("Macroblock-Type" alle in einem Frame/Slice vorkommenden Elemente)
- 3. CBP1 . . . CBPn ("Coded Block Pattern", codiertes Blockmuster)
- 4. MVD1 . . . MVDn ("Motion Vector Difference", Bewegungsvektordifferenz)
- 5. LUM1 . . . LUMn ("Luminanz Coefficient", Luminanzwerte)
- 6. CHR_DC1 . . . CHR_DCn ("DC-Chrominace Coefficients", DC-Chrominanzwerte)
- 7. CHR_AC1 . . . CHR_ACn ("AC-Chrominace Coefficients", AC-Chrominanzwerte)
Die beschriebenen Prioritätsklassen 1 bis 7 sind
beispielhaft, wobei die Prioritätsklasse 1 diejenige mit der
höchsten Priorität ist. Nach der Partitionierung des
Bilddatenstroms in die Prioritätsklassen (siehe Block 102)
wird in einer Anpassungsschicht (Blöcke 103 und 104) eine
Übertragung über einen (fehlerbehafteten) Übertragungskanal
angestoßen. In Fig. 1 ist in Block 103 eine Anpassungsschicht
für ein UMTS-Netzwerk und in einem Block 104 eine
Anpassungsschicht für ein IP-Netzwerk (Internet-Protokoll),
dargestellt. Ein großer Vorteil besteht nun darin, dass,
abhängig von dem jeweils verwendeten Netzwerk, die speziellen
Dienstgütemerkmale dieses Netzwerks genutzt werden können.
Die Dienstgütemerkmale werden der Anpassungsschicht von dem
Netzwerk mitgeteilt. Ferner kann auf der Seite des Decoders
110 dem Encoder 101 mitgeteilt werden, welche
Anpassungsschichten vorhanden sind, sodass eine entsprechende
Ausnutzung der zur Verfügung stehenden Netzwerke erfolgt
(siehe Rückkanäle 112 und 114). Die Anpassungsschicht
verpackt die in Prioritätsklassen geordneten Bilddaten in
RTP-Pakete und übermittelt diese (über verschiedene Wege,
beispielsweise paketorientiert) zu der jeweiligen
Anpassungsschicht (siehe Blöcke 107 und 108) auf der Seite
des Decoders 110. Die Bilddatenströme sind durch die
Bezugszeichen 111 und 113 gekennzeichnet.
Ein derartig von der Anpassungsschicht übermitteltes Paket
hat beispielsweise folgenden Aufbau:
- 1. PSYNC, PTYPE, MB_TYPE1 . . . MB_TYPEn, CBP1 . . . CBPn, MVD1 . . . MVDn (Prioritätsklassen 1 bis 4)
- 2. LUM1 . . . LUMn (Prioritätsklasse 5)
- 3. CHR_DC1 . . . CHR_DCn (Prioritätsklasse 6)
- 4. CHR_AC1 . . . CHR_ACn (Prioritätsklasse 7)
Hier ist nochmals verdeutlicht, dass die für das jeweilige
Bild der Folge von Bewegtbilder wichtigste Information in den
Prioritätsklassen 1 bis 4, Erläuterung siehe oben,
zusammengefasst sind. Die Helligkeitswerte (Grauwerte,
Luminanzwerte) sind in der Prioritätsklasse 5 zusammengefasst
und werden noch vor den Chrominanzwerten (Prioritätsklassen 6
und 7) übertragen. Erhält der Decoder ein solches Paket,
erkennt er, dass ein Bild anfängt, welchen Typ dieses Bild
hat, ob Objekte in dem Bild vorhanden sind und wenn ja, wo,
die Codierungsart (DCT in Block vorhanden oder nicht) und die
Bewegungsvektorinformation. Direkt danach werden die
Helligkeitswerte, also die wirklichen Bildinformationen,
übertragen. Die Farbinformation wird der
Helligkeitsinformation nachgestellt übertragen; notfalls ist
das Bild auch ohne Farbinformation erkennbar.
Die Übertragung über das Netzwerk erfolgt unter Ausnutzung
der netzwerkspezifischen Merkmale, in Fig. 1 sind ein
Internet-Protokoll-Netzwerk und ein UMTS-Netzwerk
beispielhaft gezeigt. Jedes dieser Netzwerke kann Störungen
unterliegen, wobei Paketverluste auftreten können. Die
Anpassungsschicht (siehe Block 107 und 108) auf der Seite des
Decoders detektieren solche Paketverluste. Der Block 109
übernimmt die Departitionierung, also das Wiederherstellen
des Bilddatenstroms durch Aufteilen der Prioritätsklassen und
führt eine Fehlerbehandlung für die verloren gegangene
Information durch. Schließlich wird das Ergebnis dem Decoder
110 übergeben. Damit kann der Decoder 110 ein
standardisierter Bilddecoder sein, der Dienst der
Partitionierung bzw. Departitionierung in Prioritätsklassen
und die beschriebene Fehlerbehandlung werden für den
standardisierten Decoder 110 transparent erbracht.
Insbesondere weist jede niedrige Prioritätsklasse
Abhängigkeiten zu einer höheren Prioritätsklasse auf. Gehen
Daten der höheren Prioritätsklasse verloren, sind auch Daten
der darunterliegenden Prioritätsklasse, die in Abhängigkeit
zu Elementen in der verlorenen Klasse stehen, nicht mehr
auswertbar, es sei denn die verlorene Information kann aus
vorangangenen Bildern geschätzt werden ("error concealment").
Dieses Schätzen ist umso erfolgreicher, desto korrelierter
(dann aber weniger kodiereffizient) die einzelnen
Bildinformationen sind.
Eine Besonderheit besteht darin, dass eine Zusammenfassung
von mehreren aufeinanderfolgenden Macroblöcken (Slice) auch
in einem partitionierten Bilddatenstrom berücksichtigt werden
kann. Dabei wird nachfolgend vorteilhaft angegeben, wie
einerseits der Slice in dem oben beschriebenen
Partitionierungsverfahren adressierbar bleibt und
andererseits für die Adressierung möglichst wenig
Speicherplatz erforderlich ist.
Eine gewöhnliche Anordnung von Slice-Headern in
Bilddatenströmen (ohne Partitionierung) sieht wie folgt aus:
|PSYNC|PTYPE|
|SLICE|MBTYPE1|DCT-Coeff1|MBTYPE2|DCT-Coeff2|
|SLICE|MBTYPE1| . . .
|SLICE|MBTYPE1|DCT-Coeff1|MBTYPE2|DCT-Coeff2|
|SLICE|MBTYPE1| . . .
wobei
SLICE = Sliceheader
SLICETABLE = Sliceadressierung als Tabelle
DCT-Coeff = Alle DCT-Koeffizienten in einem Macroblocks
bezeichnen.
SLICE = Sliceheader
SLICETABLE = Sliceadressierung als Tabelle
DCT-Coeff = Alle DCT-Koeffizienten in einem Macroblocks
bezeichnen.
Bei der Partitionierung ergibt sich einmal die Möglichkeit,
die Slice-Header derart anzugeben, dass ihnen alle in dem
Slice enthaltenen Macroblock-Typen nachgestellt sind:
|PSYNC|PTYPE|
|SLICE|MBTYPE1|MBTYPE2|
|SLICE|MBTYPE3|MBTYPE4| . . . ⇒
⇒ DCT-Coeff1|DCT-Coeff2|DCT-Coeff3|DCT-Coeff4| . . .
⇒ DCT-Coeff1|DCT-Coeff2|DCT-Coeff3|DCT-Coeff4| . . .
Hierbei ist die Slice-Header-Information in der
Prioritätsklasse 2 des obigen Beispiels (Macroblock-Typ)
eingeordnet.
Alternativ kann die Adressierung des Slice-Headers als
Tabelle erfolgen, wobei die Elemente der Tabelle ausweisen,
welche Macroblöcke zu welchem Slice gehören (Spalten-/Zeilen-
Zuordnung). Eine solche Slice-Adressierung sieht wie folgt
aus:
|PSYNC|PTYPE|
|SLICETABLE|MBTYPE1|MBTYPE2|MBTYPE3|MBTYPE4| . . .
Eine andere Alternative besteht darin, dass die Adressierung
der Slice-Header innerhalb der eigentlichen Bilddaten, das
heißt der DCT-Koeffizienten erfolgt. In diesem Fall ist die
Slice-Information beispielsweise den Chrominanzwerten, das
heißt der Prioritätsklasse 5 nach obigem Schema, zugeordnet.
Nachfolgend ist hierfür ein Beispiel gezeigt:
Bei Einsatz der Slice-Adressierung über eine Tabelle bzw.
innerhalb der Macroblock-Typ-Partition ist es möglich,
signifikant Speicherplatz einzusparen. Ferner kann in der
Anpassungsschicht des Empfänger bei Einigung auf eine
bestimmte Art der Adressierung ein für den Decoder 110
transparente und effiziente Umsetzung vorgenommen werden.
[1] J. D. Villasenor: "Proposed Draft Text for the H.263
Annex V Data Partitioned Slice Mode", ITU, Study Group
16, Video Experts Group, Document: Q15-I-14, Red Bank
Meeting, Oct. 18-21, 1999
[2] H.-D. Cho, Y.-S. Saw, "A New Error Resiliant Coding Method using Data Partitioning with Reed-Solomon Protection", ITU, Study Group 16, Video Experts Group, Document: Q15-H-25, Berlin Meeting, Aug. 3-6, 1999
[3] M. Lutrell, "Simulatin Results for Modified Error Resilient Syntax with Data Partitioning and RVLC" ITU, Study Group 16, Video Experts Group, Document: Q15-F-29, Seoul Meeting, Nov. 2-6, 1998
[4] D. Hofmann, G. Fernando: "RTP Payload Format for MPEG1/MPEG2 Video, IETF-Doc. RFC 2250, http:/ / www.ietf.org/rfc.html.
[5] C. Zhu: "RTP Payload Format for H.263 Video Streams" IETF-Doc. RFC 2190, http:/ /www.ietf.org/rfc.html.
[6] ITU-Recommendation H.263 Annex K.
[2] H.-D. Cho, Y.-S. Saw, "A New Error Resiliant Coding Method using Data Partitioning with Reed-Solomon Protection", ITU, Study Group 16, Video Experts Group, Document: Q15-H-25, Berlin Meeting, Aug. 3-6, 1999
[3] M. Lutrell, "Simulatin Results for Modified Error Resilient Syntax with Data Partitioning and RVLC" ITU, Study Group 16, Video Experts Group, Document: Q15-F-29, Seoul Meeting, Nov. 2-6, 1998
[4] D. Hofmann, G. Fernando: "RTP Payload Format for MPEG1/MPEG2 Video, IETF-Doc. RFC 2250, http:/ / www.ietf.org/rfc.html.
[5] C. Zhu: "RTP Payload Format for H.263 Video Streams" IETF-Doc. RFC 2190, http:/ /www.ietf.org/rfc.html.
[6] ITU-Recommendation H.263 Annex K.
Claims (16)
1. Verfahren zur Übertragung digitalisierter Bewegtbilder
von einem Sender zu einem Empfänger,
- a) bei dem die digitalisierten Bewegtbilder beim Sender als ein Bilddatenstrom vorliegen;
- b) bei dem der Bilddatenstrom in Prioritätsklassen unterteilt wird;
- c) bei dem anhand einer Anpassungsschicht beim Sender der in Prioritätsklassen unterteilte Bilddatenstrom mittels eines vorgegebenen Protokolls zu dem Empfänger übertragen wird;
- d) bei dem anhand einer Anpassungsschicht des Empfängers Übertragungsfehler bestimmt werden;
- e) bei dem für die Übertragungsfehler beim Empfänger eine Fehlerbehandlung durchgeführt wird und
- f) bei dem der übertragene fehlerbehandelte Bilddatenstrom einem Bilddecoder zugeführt wird.
2. Verfahren nach Anspruch 1,
bei dem mehrere Empfänger als Adressaten für den
Bilddatenstrom vorgesehen sind.
3. Verfahren nach Anspruch 1 oder 2,
bei dem anhand der Prioritätsklassen eine Sortierung der
Daten der Bewegtbilder derart erfolgt, dass diejenigen
Daten mit dem größten Informationsgehalt zuerst innerhalb
des Bilddatenstroms von dem Sender zu dem Empfänger
übertragen werden.
4. Verfahren nach einem der vorhergehenden Ansprüche,
bei dem die Anpassungsschicht unterschiedliche Protokolle
für die Übertragung von dem Sender zu dem Empfänger
nutzt.
5. Verfahren nach einem der vorhergehenden Ansprüche,
bei dem die Anpassungsschicht den Dienst der Übertragung
zwischen Sender und Empfänger erbringt, indem vorgegebene
Dienstgütemerkmale bei der Übertragung berücksichtigt
werden.
6. Verfahren nach einem der vorhergehenden Ansprüche,
bei dem Übertragungsfehler bestimmt werden, indem von der
Anpassungsschicht ein fehlersensitives Protokoll
eingesetzt wird.
7. Verfahren nach Anspruch 6,
bei dem das fehlersensitive Protokoll ein RTP-Protokoll
ist.
8. Verfahren nach einem der vorhergehenden Ansprüche,
bei dem die Übertragung über eine oder mehrere
Funkschnittstellen erfolgt.
9. Verfahren nach einem der vorhergehenden Ansprüche,
bei dem die Übertragung paketvermittelt und/oder
verbindungsorientiert durchgeführt wird.
10. Verfahren nach einem der vorhergehenden Ansprüche,
bei dem der Bilddecoder die erhaltenen Bewegtbilder
darstellt.
11. Verfahren nach einem der vorhergehenden Ansprüche,
bei dem eine Gruppe von zusammenhängenden Makroblöcken
durch eine Headerinformation in einer Prioritätsklasse
adressierbar wird.
12. Verfahren nach Anspruch 11,
bei dem die Headerinformation für die Gruppe von
zusammenhängenden Makroblöcken in Form einer Tabelle
zusammengefasst werden.
13. Verfahren nach einem der vorhergehenden Ansprüche,
bei dem der Bilddecoder ein standardisierter Bilddecoder
nach einem MPEG-Standard oder einem H.26x-Standard ist.
14. Verfahren zur Decodierung digitalisierter Bewegtbilder in
einem Empfänger,
- a) bei dem die digitalisierten Bewegtbilder als ein Bilddatenstrom vorliegen;
- b) bei dem der Bilddatenstrom in Prioritätsklassen unterteilt wird;
- c) bei dem anhand einer Anpassungsschicht des Empfängers Übertragungsfehler bestimmt werden;
- d) bei dem für die Übertragungsfehler beim Empfänger eine Fehlerbehandlung durchgeführt wird und
- e) bei dem der übertragene fehlerbehandelte Bilddatenstrom einem Bilddecoder zugeführt wird.
15. Bilddecoder
mit einer Prozessoreinheit, die derart ausgeführt ist,
dass
- a) die digitalisierten Bewegtbilder als ein Bilddatenstrom vorliegen;
- b) der Bilddatenstrom in Prioritätsklassen unterteilt ist;
- c) anhand einer Anpassungsschicht des Empfängers Übertragungsfehler bestimmbar sind;
- d) für die Übertragungsfehler beim Empfänger eine Fehlerbehandlung durchführbar ist und
- e) der übertragene fehlerbehandelte Bilddatenstrom einem Bilddecoder zuführbar ist.
16. System zur Übertragung digitalisierter Bewegtbilder
mit einem Sender und einem Empfänger,
- a) bei dem die digitalisierten Bewegtbilder beim Sender als ein Bilddatenstrom vorliegen;
- b) bei dem der Sender den Bilddatenstrom in Prioritätsklassen unterteilt;
- c) bei dem der Sender anhand einer Anpassungsschicht den in Prioritätsklassen unterteilten Bilddatenstrom mittels eines vorgegebenen Protokolls zu dem Empfänger überträgt;
- d) bei dem der Empfänger anhand einer Anpassungsschicht Übertragungsfehler bestimmt;
- e) bei dem der Empfänger für die Übertragungsfehler eine Fehlerbehandlung durchführt und
- f) bei dem beim Empfänger der übertragene fehlerbehandelte Bilddatenstrom einem Bilddecoder zugeführt wird.
Priority Applications (7)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE10033110A DE10033110B4 (de) | 2000-07-07 | 2000-07-07 | Verfahren, und System zur Übertragung digitalisierter Bewegtbilder von einem Sender zu einem Empfänger und zugehöriger Decoder |
CNB018147143A CN1235407C (zh) | 2000-07-07 | 2001-07-05 | 从发射机向接收机传输数字化运动图像的方法和系统以及相应的解码器 |
EP01953868A EP1299998A2 (de) | 2000-07-07 | 2001-07-05 | Verfahren, und system zur übertragung digitalisierter bewegtbilder von einem sender zu einem empfänger und zugehöriger decoder |
AU2001276309A AU2001276309A1 (en) | 2000-07-07 | 2001-07-05 | Method and system for transmitting digitized moving images from a transmitter to a receiver and a corresponding decoder |
JP2002509274A JP2004503185A (ja) | 2000-07-07 | 2001-07-05 | ディジタル動画を送信機から受信機へ伝送するための方法及びシステムならびに関連するデコーダ |
US10/332,346 US20030174774A1 (en) | 2000-07-07 | 2001-07-05 | Method and system for transmitting digitized moving images from a transmitter to a receiver and a corresponding decoder |
PCT/DE2001/002491 WO2002005540A2 (de) | 2000-07-07 | 2001-07-05 | Verfahren, und system zur übertragung digitalisierter bewegtbilder von einem sender zu einem empfänger und zugehöriger decoder |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE10033110A DE10033110B4 (de) | 2000-07-07 | 2000-07-07 | Verfahren, und System zur Übertragung digitalisierter Bewegtbilder von einem Sender zu einem Empfänger und zugehöriger Decoder |
Publications (2)
Publication Number | Publication Date |
---|---|
DE10033110A1 true DE10033110A1 (de) | 2002-01-17 |
DE10033110B4 DE10033110B4 (de) | 2005-06-16 |
Family
ID=7648164
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE10033110A Expired - Fee Related DE10033110B4 (de) | 2000-07-07 | 2000-07-07 | Verfahren, und System zur Übertragung digitalisierter Bewegtbilder von einem Sender zu einem Empfänger und zugehöriger Decoder |
Country Status (7)
Country | Link |
---|---|
US (1) | US20030174774A1 (de) |
EP (1) | EP1299998A2 (de) |
JP (1) | JP2004503185A (de) |
CN (1) | CN1235407C (de) |
AU (1) | AU2001276309A1 (de) |
DE (1) | DE10033110B4 (de) |
WO (1) | WO2002005540A2 (de) |
Families Citing this family (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6983379B1 (en) | 2000-06-30 | 2006-01-03 | Hitwise Pty. Ltd. | Method and system for monitoring online behavior at a remote site and creating online behavior profiles |
US8284844B2 (en) | 2002-04-01 | 2012-10-09 | Broadcom Corporation | Video decoding system supporting multiple standards |
US20040057465A1 (en) * | 2002-09-24 | 2004-03-25 | Koninklijke Philips Electronics N.V. | Flexible data partitioning and packetization for H.26L for improved packet loss resilience |
KR100865034B1 (ko) | 2002-07-18 | 2008-10-23 | 엘지전자 주식회사 | 모션 벡터 예측 방법 |
US20040203624A1 (en) * | 2002-09-12 | 2004-10-14 | Teh Jin Teik | Technique for sharing of files with minimal increase of storage space usage |
JP4406816B2 (ja) * | 2002-12-11 | 2010-02-03 | ソニー株式会社 | 受信装置および受信方法、記録媒体、並びにプログラム |
US7716584B2 (en) * | 2003-06-30 | 2010-05-11 | Panasonic Corporation | Recording medium, reproduction device, recording method, program, and reproduction method |
US7386316B2 (en) * | 2003-08-17 | 2008-06-10 | Omnivision Technologies, Inc. | Enhanced video streaming using dual network mode |
JP4423301B2 (ja) * | 2005-01-18 | 2010-03-03 | 三菱電機株式会社 | 多重化装置及び送受信装置 |
US8888592B1 (en) | 2009-06-01 | 2014-11-18 | Sony Computer Entertainment America Llc | Voice overlay |
US8147339B1 (en) | 2007-12-15 | 2012-04-03 | Gaikai Inc. | Systems and methods of serving game video |
US8968087B1 (en) | 2009-06-01 | 2015-03-03 | Sony Computer Entertainment America Llc | Video game overlay |
US8613673B2 (en) | 2008-12-15 | 2013-12-24 | Sony Computer Entertainment America Llc | Intelligent game loading |
US8926435B2 (en) | 2008-12-15 | 2015-01-06 | Sony Computer Entertainment America Llc | Dual-mode program execution |
US8840476B2 (en) | 2008-12-15 | 2014-09-23 | Sony Computer Entertainment America Llc | Dual-mode program execution |
US8506402B2 (en) | 2009-06-01 | 2013-08-13 | Sony Computer Entertainment America Llc | Game execution environments |
US8560331B1 (en) | 2010-08-02 | 2013-10-15 | Sony Computer Entertainment America Llc | Audio acceleration |
KR102000618B1 (ko) | 2010-09-13 | 2019-10-21 | 소니 인터랙티브 엔터테인먼트 아메리카 엘엘씨 | 부가기능의 관리 |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2897921B2 (ja) * | 1988-09-27 | 1999-05-31 | 富士通株式会社 | 画像符号化伝送装置 |
JPH0322736A (ja) * | 1989-06-20 | 1991-01-31 | Matsushita Electric Ind Co Ltd | 優先パケット多重回路と映像パケット伝送システム |
US5140417A (en) * | 1989-06-20 | 1992-08-18 | Matsushita Electric Co., Ltd. | Fast packet transmission system of video data |
US5515377A (en) * | 1993-09-02 | 1996-05-07 | At&T Corp. | Adaptive video encoder for two-layer encoding of video signals on ATM (asynchronous transfer mode) networks |
GB2332116B (en) * | 1997-12-01 | 1999-10-20 | Samsung Electronics Co Ltd | Video codec method in error resilient mode and apparatus therefor |
US6134243A (en) * | 1998-01-15 | 2000-10-17 | Apple Computer, Inc. | Method and apparatus for media data transmission |
US6075561A (en) * | 1998-02-20 | 2000-06-13 | Tektronix, Inc. | Low duty-cycle transport of video reference images |
JP2000078573A (ja) * | 1998-09-03 | 2000-03-14 | Hitachi Ltd | 階層符号化データ配信装置 |
US6246435B1 (en) * | 1998-09-08 | 2001-06-12 | Tektronix, Inc. | In-service realtime picture quality analysis |
US6430159B1 (en) * | 1998-12-23 | 2002-08-06 | Cisco Systems Canada Co. | Forward error correction at MPEG-2 transport stream layer |
DE19860531C1 (de) * | 1998-12-30 | 2000-08-10 | Univ Muenchen Tech | Verfahren zur Übertragung codierter digitaler Signale |
US6683853B1 (en) * | 1999-12-01 | 2004-01-27 | Telefonaktiebolaget Lm Ericsson (Publ) | Dynamic upgrade of quality of service in a packet switched network |
US6601209B1 (en) * | 2000-03-17 | 2003-07-29 | Verizon Laboratories Inc. | System and method for reliable data transmission over fading internet communication channels |
-
2000
- 2000-07-07 DE DE10033110A patent/DE10033110B4/de not_active Expired - Fee Related
-
2001
- 2001-07-05 CN CNB018147143A patent/CN1235407C/zh not_active Expired - Fee Related
- 2001-07-05 AU AU2001276309A patent/AU2001276309A1/en not_active Abandoned
- 2001-07-05 JP JP2002509274A patent/JP2004503185A/ja active Pending
- 2001-07-05 EP EP01953868A patent/EP1299998A2/de not_active Withdrawn
- 2001-07-05 US US10/332,346 patent/US20030174774A1/en not_active Abandoned
- 2001-07-05 WO PCT/DE2001/002491 patent/WO2002005540A2/de active Application Filing
Also Published As
Publication number | Publication date |
---|---|
CN1235407C (zh) | 2006-01-04 |
AU2001276309A1 (en) | 2002-01-21 |
CN1449627A (zh) | 2003-10-15 |
EP1299998A2 (de) | 2003-04-09 |
WO2002005540A2 (de) | 2002-01-17 |
DE10033110B4 (de) | 2005-06-16 |
US20030174774A1 (en) | 2003-09-18 |
WO2002005540A3 (de) | 2002-07-18 |
JP2004503185A (ja) | 2004-01-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
DE10033110B4 (de) | Verfahren, und System zur Übertragung digitalisierter Bewegtbilder von einem Sender zu einem Empfänger und zugehöriger Decoder | |
DE69425010T2 (de) | Prioritätsverarbeitung von kodierten Bildsignalen | |
DE4205898B4 (de) | Anordnung zum Rekombinieren von gemäß einer Rangordnung aufgeteilten Fernsehdaten | |
DE69333982T2 (de) | Verfahren zum Anordnen komprimierter Videodaten zur Übertragung über einen verrauschten Kanal | |
DE4325032B4 (de) | Anordnung zur Aufteilung digitaler Fernsehdaten | |
DE60028942T2 (de) | Videokodierung | |
DE69225164T2 (de) | Gerät zur Segmentierung von kodierten Videosignalen zur Übertragung | |
DE69217921T2 (de) | Komprimierungsanlage für hochauflösendes fernsehen | |
DE69535553T2 (de) | Videokompression | |
DE69227402T2 (de) | Signalverarbeitungseinrichtung mit hohem Wirkungsgrad und Verminderung des Einflusses von Fehlerausbreitungen | |
DE69713435T2 (de) | Vorrichtung zum Dekodieren von MPEG kodierten Bildern mit Fehlerbehebung | |
EP0682454B1 (de) | Verfahren und Vorrichtung zur Transcodierung von Bitströmen mit Videodaten | |
DE69422970T2 (de) | Multiplexierungs-/Demultiplexierungsverfahren zur Überlagerung von Unterbildern über ein Hauptbild | |
DE60020243T2 (de) | Videokodierung | |
EP2198610B1 (de) | Verfahren und vorrichtung zum erstellen eines kodierten ausgangsvideostroms aus mindestens zwei kodierten eingangsvideoströmen, sowie verwendung der vorrichtung | |
DE60110303T2 (de) | Verfahren und Vorrichtung zur Paketübertragung mit Paketenkopfkompression | |
DE69412834T2 (de) | Vorrichtung zur bereitstellung von komprimierten bildsignalen ohne zeilensprung | |
DE4322356B4 (de) | Einrichtung zum Steuern der Rücksetzung in einem Videosignalcodierer | |
DE60130367T2 (de) | Verfahren zum dynamischen mischen von Paketkopfunterdrückungstechniken | |
CN1934865B (zh) | 调整编码器和解码器中缓冲器的大小的方法及装置 | |
DE69414899T2 (de) | Bildsignalverarbeitung | |
DE69331606T2 (de) | Datenwortindikator in einem system zur zusammenstellung von transportdatenpaketen. | |
DE69622644T2 (de) | Bildbewegungssignalkodierung und entsprechende Dekodierung | |
DE69301297T2 (de) | Verfahren zur Fehlerverdeckung für die Übertragung von MPEG-kodierten Bildern | |
DE19882497B4 (de) | Multimedia Multiplexverfahren |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
OP8 | Request for examination as to paragraph 44 patent law | ||
8364 | No opposition during term of opposition | ||
R119 | Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee | ||
R119 | Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee |
Effective date: 20140201 |