DE112016001646T5

DE112016001646T5 - Verarbeiten und bereitstellen eines bildes, in dem mehrere symbole codiert sind

Info

Publication number: DE112016001646T5
Application number: DE112016001646.8T
Authority: DE
Inventors: Mark Eyer
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 2015-04-07
Filing date: 2016-04-06
Publication date: 2018-01-11
Also published as: MX2017012579A; US20200404393A1; US20160301987A1; US20170318358A1; US10805694B2; WO2016164430A1; US9756401B2; US10313764B2; KR102484216B1; MX370229B; US20190297391A1; CA2978332C; KR20170134323A; US11146864B2; CA2978332A1

Abstract

Empfangsvorrichtung, Verfahren und nichttransitorisches computerlesbares Speichermedium zum Verarbeiten eines Bildes, in dem mehrere Symbole codiert sind, und Informationsbereitstellungsvorrichtung zum Bereitstellen des Bildes. Die Empfangsvorrichtung umfasst Schaltkreise, die dafür ausgelegt sind, ein Bild, in dem mehrere Symbole codiert sind, zu empfangen oder abzurufen. Die Schaltkreise bestimmen eine Menge von Luminanzwerten, die zum Codieren der Symbole verwendet werden, auf der Basis von Luminanzwerten mehrerer in dem Bild enthaltener Pixel. Die Schaltkreise bestimmen einen höchsten zum Codieren der Symbole in dem Bild verwendeten Luminanzwert auf der Basis der bestimmen Menge von Luminanzwerten. Ferner leiten die Schaltkreise Datenwerte der in dem Bild codierten Symbole auf der Basis der Menge von Luminanzwerten und unter Verwendung des bestimmten höchsten Luminanzwerts ab.

Description

HINTERGRUND DER ERFINDUNG
TECHNISCHES GEBIET
Hier beschriebene Ausführungsformen betreffen allgemein ein Verfahren, ein nichttransitorisches computerlesbares Speichermedium und eine Empfangsvorrichtung zum Verarbeiten eines Bildes, in dem mehrere Symbole codiert sind; und ein Verfahren, ein nichttransitorisches computerlesbares Speichermedium und eine Informationsbereitstellungsvorrichtung zum Bereitstellen des Bildes.
STAND DER TECHNIK
Die Implementierung von effektiven Verfahren zur Verteilung digitaler Daten in Digitalfernsehsystemen ist für Entwickler und Hersteller von modernen elektronischen Unterhaltungssystemen ein signifikanter Gesichtspunkt. Eine effektive Implementierung solcher Systeme kann für Systementwickler jedoch zu beträchtlichen Problemen führen. Zum Beispiel können erweiterte Anforderungen an erhöhte Systemfunktionalität und Leistungsfähigkeit mehr Fähigkeiten erfordern und zusätzliche Hardware- und Softwareressourcen erfordern. Hindernisse bei der effektiven Ablieferung von digitalen Daten in fortschrittlichen Systemen können aufgrund von Betriebsineffizienzen, verlorenen Umsatzgelegenheiten und verringerter Funktionalität zu entsprechenden negativen wirtschaftlichen Auswirkungen führen.
Ferner kann erweiterte Systemfähigkeit zum Ausführen verschiedener fortschrittlicher Operationen dem Endbenutzer zusätzliche Vorteile bieten, kann aber auch der Steuerung und Verwaltung verschiedener Systemkomponenten erhöhte Anforderungen auferlegen. Zum Beispiel kann ein erweitertes elektronisches System, das effektiv synchronisierte Fernseh-Widget-Funktionalität unterstützt, aus Verfahren Nutzen ziehen, die flexible Übermittlung des diese Funktionalität unterstützenden Datenstroms bereitstellen.
Aufgrund von wachsenden Anforderungen an Systemressourcen und wesentlich wachsenden Datengrößen ist ersichtlich, dass die Entwicklung neuer Techniken zur Implementierung und Benutzung der Datenverteilung mittels Digitalfernsehsystemen und anderer Videoverteilungssystemen für die betreffenden elektronischen Technologien ein wichtiger Gesichtspunkt ist. Aus allen obigen Gründen bleibt deshalb die Entwicklung effektiver Systeme zur Implementierung und Benutzung von Datenverteilung mittels Digitalfernsehsystemen und der anderen Videoverteilungssystemen ein signifikanter Gesichtspunkt für Entwickler, Hersteller und Benutzer von modernen elektronischen Unterhaltungssystemen.
KURZFASSUNG DER ERFINDUNG
Gemäß einer Ausführungsform der vorliegenden Offenbarung wird eine Empfangsvorrichtung bereitgestellt, die Schaltkreise umfasst, die dafür ausgelegt sind, ein Bild, in dem mehrere Symbole codiert sind, zu empfangen oder abzurufen. Die Schaltkreise bestimmen eine Menge von Luminanzwerten, die zum Codieren der Symbole verwendet werden, auf der Basis von Luminanzwerten mehrerer in dem Bild enthaltener Pixel. Die Schaltkreise bestimmen einen höchsten zum Codieren der Symbole in dem Bild verwendeten Luminanzwert auf der Basis der bestimmen Menge von Luminanzwerten. Ferner leiten die Schaltkreise auf der Basis der Menge von Luminanzwerten und unter Verwendung des bestimmten höchsten Luminanzwerts Datenwerte der in dem Bild codierten Symbole ab.
Ferner wird gemäß einer Ausführungsform der vorliegenden Offenbarung ein Verfahren zum Verarbeiten eines Bildes, in dem mehrere Symbole codiert sind, bereitgestellt. Das Verfahren umfasst Empfangen oder Abrufen des Bildes, in dem die mehreren Symbole codiert sind, durch Schaltkreise einer Empfangsvorrichtung. Auf der Basis von Luminanzwerten mehrerer in dem Bild enthaltener Pixel wird eine Menge von zum Codieren der Symbole verwendeten Luminanzwerten bestimmt. Durch die Schaltkreise wird auf der Basis der bestimmten Menge von Luminanzwerten ein höchster zum Codieren der Symbole in dem Bild verwendeter Luminanzwert bestimmt. Ferner werden durch die Schaltkreise auf der Basis der Menge von Luminanzwerten und unter Verwendung des bestimmten höchsten Luminanzwerts Datenwerte der in dem Bild codierten Symbole abgeleitet.
Ferner wird gemäß einer Ausführungsform der vorliegenden Offenbarung ein nichttransitorisches computerlesbares Medium bereitgestellt, das Anweisungen speichert, die, wenn sie durch einen Computer ausgeführt werden, bewirken, dass der Computer ein Verfahren zum Verarbeiten eines Bildes, in dem mehrere Symbole codiert sind, ausführt. Das Verfahren umfasst Empfangen oder Abrufen des Bildes, in dem die mehreren Symbole codiert sind. Auf der Basis von Luminanzwerten mehrerer in dem Bild enthaltener Pixel wird eine Menge von zum Codieren der Symbole verwendeten Luminanzwerten bestimmt. Auf der Basis der bestimmten Menge von Luminanzwerten wird ein höchster zum Codieren der Symbole in dem Bild verwendeter Luminanzwert bestimmt. Ferner werden auf der Basis der Menge von Luminanzwerten und unter Verwendung des bestimmten höchsten Luminanzwerts Datenwerte der in dem Bild codierten Symbole abgeleitet.
Ferner wird gemäß einer Ausführungsform der vorliegenden Offenbarung eine Empfangsvorrichtung bereitgestellt, die Schaltkreise umfasst, die dafür ausgelegt sind, ein Bild, in dem mehrere Symbole codiert sind, zu empfangen oder abzurufen. Die Schaltkreise bestimmen eine erste Menge von zum Codieren einer ersten Teilmenge der Symbole verwendeten Luminanzwerten auf der Basis von Luminanzwerten einer ersten Vielzahl in dem Bild enthaltener Pixel. Die Schaltkreise leiten auf der Basis eines ersten vorbestimmten Slice-Punkts Datenwerte der ersten Teilmenge der in dem Bild codierten Symbole ab. Die Schaltkreise bestimmen einen zum Codieren einer zweiten Teilmenge der Symbole in dem Bild verwendeten Luminanzwert auf der Basis der abgeleiteten Datenwerte der ersten Teilmenge der Symbole. Die Schaltkreise bestimmen eine zweite Menge von zum Codieren der zweiten Teilmenge der Symbole verwendeten Luminanzwerten auf der Basis von Luminanzwerten einer zweiten Vielzahl von in dem Bild enthaltenen Pixeln. Ferner leiten die Schaltkreise auf der Basis der zweiten Menge von Luminanzwerten und unter Verwendung des bestimmten Luminanzwerts Datenwerte der zweiten Teilmenge der in dem Bild codierten Symbole ab.
Ferner wird gemäß einer Ausführungsform der vorliegenden Offenbarung ein Verfahren zum Verarbeiten eines Bildes, in dem mehrere Symbole codiert sind, bereitgestellt. Das Verfahren umfasst Empfangen oder Abrufen eines Bildes, in dem mehrere Symbole codiert sind, durch Schaltkreise einer Empfangsvorrichtung. Auf der Basis von Luminanzwerten einer ersten Vielzahl von in dem Bild enthaltenen Pixeln wird eine erste Menge von Luminanzwerten bestimmt, die zum Codieren einer ersten Teilmenge der Symbole verwendet wird. Auf der Basis eines ersten vorbestimmten Slice-Punkts werden Datenwerte der ersten Teilmenge der in dem Bild codierten Symbole abgeleitet. Durch die Schaltkreise wird auf der Basis der abgeleiteten Datenwerte der ersten Teilmenge von Symbolen ein zum Codieren einer zweiten Teilmenge der Symbole in dem Bild verwendeter Luminanzwert bestimmt. Auf der Basis von Luminanzwerten einer zweiten Vielzahl von in dem Bild enthaltenen Pixeln wird eine zweite Menge von zum Codieren der zweiten Teilmenge der Symbole verwendeten Luminanzwerten bestimmt. Datenwerte der zweiten Teilmenge der in dem Bild codierten Symbole werden durch die Schaltkreise auf der Basis der zweiten Menge von Luminanzwerten und unter Verwendung des bestimmten Luminanzwerts bestimmt.
Ferner wird gemäß einer Ausführungsform der vorliegenden Offenbarung ein nichttransitorisches computerlesbares Medium bereitgestellt, das Anweisungen speichert, die, wenn sie durch einen Computer ausgeführt werden, bewirken, dass der Computer ein Verfahren zum Verarbeiten eines Bildes, in dem mehrere Symbole codiert sind, ausführt. Das Verfahren umfasst Empfangen oder Abrufen eines Bildes, in dem mehrere Symbole codiert sind. Auf der Basis von Luminanzwerten einer ersten Vielzahl von in dem Bild enthaltenen Pixeln wird eine erste Menge von zum Codieren einer ersten Teilmenge der Symbole verwendeten Luminanzwerten bestimmt. Auf der Basis eines ersten vorbestimmten Slice-Punkts werden Datenwerte der ersten Teilmenge der in dem Bild codierten Symbole abgeleitet. Auf der Basis der abgeleiteten Datenwerte der ersten Teilmenge der Symbole wird ein zum Codieren einer zweiten Teilmenge der Symbole in dem Bild verwendeter Luminanzwert bestimmt. Auf der Basis von Luminanzwerten einer zweiten Vielzahl von in dem Bild enthaltenen Pixeln wird eine zweite Menge von zum Codieren der zweiten Teilmenge der Symbole verwendeten Luminanzwerten bestimmt. Auf der Basis der zweiten Menge von Luminanzwerten und unter Verwendung des bestimmten Luminanzwerts werden Datenwerte der zweiten Teilmenge der in dem Bild codierten Symbole bestimmt.
Ferner wird gemäß einer Ausführungsform der vorliegenden Offenbarung eine Informationsbereitstellungsvorrichtung bereitgestellt, die Schaltkreise umfasst, die dafür ausgelegt sind ein Bild, in dem mehrere Symbole zu codieren sind, zu empfangen oder abzurufen. Die Schaltkreise codieren die mehreren Symbole in dem Bild. Die mehreren Symbole werden in dem Bild unter Verwendung von Luminanzwerten mehrerer in dem Bild enthaltener Pixel codiert. Die Schaltkreise stellen ferner das Bild, in dem die mehreren Symbole codiert sind, einer Empfangsvorrichtung bereit. Ein zum Codieren mindestens eines der mehreren Symbole verwendeter Luminanzwert wird durch einen Betreiber gesetzt.
Ferner wird gemäß einer Ausführungsform der vorliegenden Offenbarung ein Verfahren zum Bereitstellen eines Bildes, in dem mehrere Symbole codiert sind, bereitgestellt. Das Verfahren umfasst Empfangen oder Abrufen eines Bildes, in dem die mehreren Symbole zu codieren sind. Die mehreren Symbole werden durch Schaltkreise einer Informationsbereitstellungsvorrichtung in dem Bild codiert. Die mehreren Symbole werden in dem Bild unter Verwendung von Luminanzwerten mehrerer in dem Bild enthaltener Pixel codiert. Ferner wird das Bild, in dem die mehreren Symbole codiert sind, durch die Schaltkreise einer Empfangsvorrichtung bereitgestellt. Ein zum Codieren mindestens eines der mehreren Symbole verwendeter Luminanzwert wird durch einen Betreiber gesetzt.
Ferner wird gemäß einer Ausführungsform der vorliegenden Offenbarung ein nichttransitorisches computerlesbares Medium bereitgestellt, das Anweisungen speichert, die, wenn sie durch einen Computer ausgeführt werden, bewirken, dass der Computer ein Verfahren zum Bereitstellen eines Bildes, in dem mehrere Symbole codiert sind, ausführt. Das Verfahren umfasst Empfangen oder Abrufen eines Bildes, in dem die mehreren Symbole zu codieren sind. Die mehreren Symbole werden in dem Bild codiert. Die mehreren Symbole werden in dem Bild unter Verwendung von Luminanzwerten mehrerer in dem Bild enthaltener Pixel codiert. Ferner wird das Bild, in dem die mehreren Symbole codiert sind, einer Empfangsvorrichtung bereitgestellt. Ein zum Codieren mindestens eines der mehreren Symbole verwendeter Luminanzwert wird durch einen Betreiber gesetzt.
KURZE BESCHREIBUNG DER ZEICHNUNGEN
Ein vollständigeres Verständnis der vorliegenden Offenbarung und vieler der einhergehenden Vorteile dieser werden ohne weiteres erhalten, wenn diese durch Bezugnahme auf die folgende ausführliche Beschreibung in Verbindung mit den beigefügten Zeichnungen besser verstanden wird. Es zeigen:
1A eine Blockdarstellung eines elektronischen Systems gemäß einer Ausführungsform der vorliegenden Offenbarung;
1B eine Darstellung einer Anzeige von dem Fernseher von 1A gemäß einer Ausführungsform der vorliegenden Offenbarung;
2A eine Blockdarstellung für eine Ausführungsform der Inhaltsquelle von 1A gemäß der vorliegenden Offenbarung;
2B eine beispielhafte Informationsbereitstellungsvorrichtung, die an der Inhaltsquelle implementiert wird, gemäß einer Ausführungsform der vorliegenden Offenbarung;
3 eine Blockdarstellung für eine Ausführungsform des Quellenspeichers der Inhaltsquelle gemäß der vorliegenden Offenbarung;
4 eine Blockdarstellung für eine Ausführungsform der in dem Quellenspeicher gespeicherten Metadaten gemäß der vorliegenden Offenbarung;
5A–5C beispielhafte Blockdarstellungen der Empfangsvorrichtung gemäß bestimmten Ausführungsformen der vorliegenden Offenbarung;
6 eine Blockdarstellung für eine Ausführungsform des TV-Speichers von 5A gemäß der vorliegenden Offenbarung;
7A und 7B Darstellungen von in Videodaten eingebetteten digitalen Daten gemäß zwei verschiedenen Ausführungsformen der vorliegenden Offenbarung;
8A–8C ein Flussdiagramm von Verfahrensschritten zum Verteilen digitaler Daten gemäß einer Ausführungsform der vorliegenden Offenbarung;
9 ein Flussdiagramm von Verfahrensschritten zum Verarbeiten eines Bildes, in dem mehrere Symbole codiert sind, gemäß einer Ausführungsform der vorliegenden Offenbarung;
10 ein Flussdiagramm von Verfahrensschritten zum Verarbeiten eines Bildes, in dem mehrere Symbole codiert sind, gemäß einer Ausführungsform der vorliegenden Offenbarung;
11 ein Flussdiagramm von Verfahrensschritten zum Bestimmen, ob mehrere Symbole in einem Bild codiert sind, gemäß einer Ausführungsform der vorliegenden Offenbarung;
12A und 12B Beispiele für Luminanzcodierung mit 1 Bit und 2 Bit pro Symbol;
13 eine beispielhafte Analyse von Wasserzeichensymbolen gemäß einer Ausführungsform der vorliegenden Offenbarung;
14A–14C beispielhaften JavaScript-Code zum Implementieren eines Wasserzeichen-Wiedergewinnungsalgorithmus gemäß einer Ausführungsform der vorliegenden Offenbarung; und
15 einen beispielhaften Computer.
AUSFÜHRLICHE BESCHREIBUNG
Obwohl die vorliegende Offenbarung vielfältige Ausführungsformen aufweisen kann, sind in den Zeichnungen im Detail spezifische Ausführungsformen gezeigt und werden hier ausführlich beschrieben, mit dem Verständnis, dass die vorliegende Offenbarung solcher Ausführungsformen als Beispiel für die Prinzipien zu betrachten ist und nicht dazu bestimmt ist, die vorliegende Offenbarung auf die spezifischen gezeigten und beschriebenen Ausführungsformen zu beschränken. In der nachfolgenden Beschreibung werden gleiche Bezugszahlen verwendet, um in den mehreren Ansichten der Zeichnungen die gleichen, ähnliche oder entsprechende Teile zu beschreiben. Die Patentschrift umfasst die folgende Beschreibung und angefügte Anhänge.
Die Ausdrücke „ein“ oder „eine“, sowie sie hier gebraucht werden, sind als eines oder mehr als eines definiert. Der hier gebrauchte Ausdruck „mehrere“ ist als zwei oder mehr als zwei definiert. Der hier gebrauchte Ausdruck „ein weiteres“ ist als mindestens ein zweites oder mehr definiert. Die hier gebrauchten Ausdrücke „umfassen“ und/oder „aufweisen“ sind als umfassend definiert (d.h. offene Sprache). Der hier verwendete Ausdruck „gekoppelt“ ist als verbunden, wenn auch nicht unbedingt direkt und nicht unbedingt mechanisch, definiert. Der Ausdruck „Programm“ oder „Computerprogramm“ oder ähnliche Ausdrücke, sowie sie hier gebraucht werden, ist als Sequenz von Anweisungen definiert, die für Ausführung auf einem Computersystem bestimmt ist. Ein „Programm“ oder „Computerprogramm“ kann eine Subroutine, ein Programmmodul, ein Skript, eine Funktion, eine Prozedur, eine Objektmethode, eine Objektimplementierung in einer ausführbaren Anwendung, einem Applet, einem Servlet, einem Quellcode, einem Objektcode, einer geteilten Bibliothek/dynamischen Ladebibliothek und/oder andere Sequenz von für Ausführung auf einem Computersystem bestimmten Anweisungen umfassen.
Der hier gebrauchte Ausdruck „Programm“ kann auch in einem zweiten Kontext verwendet werden (die obige Definition ist für den ersten Kontext). Im zweiten Kontext wird der Ausdruck im Sinne eines „Fernsehprogramms“ verwendet. In diesem Kontext soll der Ausdruck eine beliebige kohärente Sequenz von Audio-/Videoinhalt bedeuten, wie etwa diejenigen, die in einem elektronischen Programmführer (EPG) als ein einzelnes Fernsehprogramm gedeutet und gemeldet würden, ohne Rücksicht darauf, ob der Inhalt ein Spielfilm, ein Sportereignis, ein Segment einer mehrteiligen Serie, Nachrichtenausstrahlung usw. ist. Der Ausdruck kann auch so gedeutet werden, dass er Werbespots und anderen programmartigen Inhalt einschließt, der in einem EPG nicht als Programm gemeldet werden kann.
In der vorliegenden Schrift bedeutet Erwähnung von „einer Ausführungsform“, „bestimmten Ausführungsformen“, „einer Implementierung“, „eines Beispiels“ oder ähnlicher Ausdrücke, dass ein bestimmtes Merkmal, eine bestimmte Struktur oder ein bestimmtes Charakteristikum, die in Verbindung mit der Ausführungsform beschrieben werden, in mindestens einer Ausführungsform der vorliegenden Offenbarung enthalten ist. Das Erscheinen solcher Phrasen an verschiedenen Stellen in der vorliegenden Patentschrift bezieht sich somit nicht unbedingt immer auf dieselbe Ausführungsform. Ferner können die konkreten Merkmale, Strukturen oder Charakteristika bei einer oder mehreren Ausführungsformen ohne Beschränkung in einer beliebigen geeigneten Weise kombiniert werden.
Der hier gebrauchte Ausdruck „oder“ ist als einschließend oder ein beliebiges oder eine beliebige Kombination bedeutend aufzufassen. Deshalb bedeutet „A, B oder C“ „beliebiges von Folgendem: A; B; C; A und B; A und C; B und C; A, B und C“. Eine Ausnahme für diese Definition tritt nur auf, wenn eine Kombination von Elementen, Funktionen, Schritten, oder Handlungen sich auf irgendeine Weise naturgemäß gegenseitig ausschließt.
Ausführungsformen der vorliegenden Erfindung betreffen die Ablieferung digitaler Daten (z.B. Metadaten, Anwendungsdaten, Programmführerdaten, Einblendungsdaten usw.) in Videodaten. Die digitalen Daten werden als ein Wasserzeichen in die Videodaten eingebettet. Die Verwendung der ersten einen oder zwei Zeilen eines Videos zum Abliefern digitaler Daten funktioniert gut für Fälle, in denen Anzeigevorrichtungen in einem Überabtastungsmodus arbeiten (z.B. nur die mittleren ~95% aktiver Videozeilen anzeigen). Wenn die Anzeige auf einen „Vollpixel“-Anzeigemodus gesetzt wird, wäre jedes Wasserzeichen auf den ersten zwei Zeilen sichtbar. Die Verwendung eines Wasserzeichen mit geringerer Sichtbarkeit kann deshalb vorteilhaft sein, um die Möglichkeit zu vermeiden, dass das Wasserzeichen auf der Anzeige sichtbar wird.
Das Verfahren zum Modulieren von Luminanzwerten verlässt sich darauf, in der Lage zu sein, die digitalen Daten im Empfänger widerzugewinnen. Wie jedes Pulsamplitudenmodulations- bzw. PAM-System muss der Empfänger einen „Slice-Punkt“ setzen, der verwendet wird, um zu bestimmen, ob ein bestimmtes Symbol eine Eins oder Null ist (oder bei einem System mit 2 Bit pro Symbol der Wert 00, 01, 10 oder 11). Durch Ausführungsformen der vorliegenden Offenbarung wird ein Standard, um genau die nominalen Werte für Luminanz, die für die verschiedenen Symbolwerte verwendet werden, zu spezifizieren, unnötig. Deshalb erhält die Sendeanstalt die Flexibilität, die Werte für einen Kompromiss zwischen Wasserzeichensichtbarkeit und Robustheit zu justieren. Höhere Werte der Luminanz führen zu höherer Sichtbarkeit und höherer Robustheit und/oder höheren Bit pro Symbol. Niedrigere Werte führen zu geringerer Sichtbarkeit zu Lasten geringerer Robustheit und/oder weniger Bit pro Symbol.
Bestimmte Ausführungsformen der vorliegenden Offenbarung umfassen ein System, wodurch digitale Daten in einem Videosignal durch Modulieren des Luminanzpegels in der ersten Zeile oder zwei von Video abgeliefert werden. Die digitalen Daten können als Video-Wasserzeichen betrachtet werden. Das Entwurfsproblem betrifft die Weise, wie der Empfänger das beste Verfahren zum Wiedergewinnen des Wasserzeichens bestimmt. Bei einem fest definierten System würde der Standard ein Modulationsverfahren spezifizieren und Empfänger würden dann einen mit dem Standard übereinstimmenden Wiedergewinnungsalgorithmus implementieren.
Es wäre vorteilhaft, wenn die Sendeanstalt bezüglich der Weise, wie das Luminanzsignal moduliert wird, etwas Flexibilität hätte. In diesem Fall könnte ein Standard spezifizieren, dass der niedrigste zum Codieren von Symbolen verwendete Luminanzwert 0 ist (wobei der Luminanzwert 16 als „schwarz“ betrachtet wird), und der höchste Luminanzwert in einem gegebenen Bereich von Werten (z.B. 30 bis 235) liegen wird. Bei einer Codierung mit 2 Bit pro Symbol könnten die mittleren zwei Luminanzwerte berechnet werden. Wenn N der höchste zum Codieren verwendete Luminanzwert ist, wären die vier gebrauchten Codes 0, N/3, 2N/3, N. Bei Codierung mit 1 Bit pro Symbol wären die Werte 0 und N. Bei anderen Ausführungsformen könnte Codierung mit mehr Bit pro Symbol benutzt werden.
Zum Beispiel können einige Sendeanstalten wählen, niedrige Werte (sichtbar dunkler) zu verwenden, weil sie sich um Sichtbarkeit Sorgen machen (einige Kundengeräte können unter einigen Anzeigeeinstellungen dem Benutzer die ersten zwei Videozeilen sichtbar machen). Andere können sich nicht um Sichtbarkeit kümmern und können wünschen, stattdessen bezüglich Robustheit zu optimieren, mit der Kenntnis, dass ein größerer Bereich von Luminanzwerten Transcodierung und starke Videokomprimierung besser überdauert als ein kleinerer Bereich. Ein größerer Bereich von Luminanzwerten könnte es Sendeanstalten auch erlauben, mehr Bit pro Symbol zu verwenden.
Statt einen Standard die erforderlichen Werte für Luminanz spezifizieren zu lassen oder zusätzlich dazu bestimmt der Empfänger unter Verwendung bestimmter hier beschriebener Ausführungsformen den Bereich von gebrauchten Werten durch Analyse und justiert den Wasserzeichen-Wiedergewinnungsalgorithmus entsprechend. Bei anderen Ausführungsformen gibt das Wasserzeichen selbst oder ein beliebiger codierter Teil die richtigen für optimale Wiedergewinnung zu verwendenden Parameter an. In diesem Fall liefert das Protokoll Daten, die wiedergewonnen und zum Setzen der optimalen Wiedergewinnung verwendet werden können. Hier beschriebene Ausführungsformen erlauben es der Sendeanstalt, den Robustheitsgrad und/oder verwendete Bit pro Symbol gemäß ihren Wünschen als Kompromiss zwischen Robustheit und/oder Bit pro Symbol und Sichtbarkeit des Wasserzeichens zu setzen.
Obwohl die vorliegende Offenbarung hauptsächlich unter Verwendung eines in Zeile 1 eines Videoeinzelbildes eingebetteten Wasserzeichens beschrieben wird, kann das Wasserzeichen in andere Zeilen oder vorbestimmte Teile eines Videoeinzelbildes eingebettet werden. Ferner kann bei bestimmten Ausführungsformen das Wasserzeichen in andere Bildtypen eingebettet werden.
Die vorliegende Offenbarung wird hier als System und Verfahren zum Verteilen digitaler Daten (die z.B. durch mehrere Symbole repräsentiert werden), die in Videodaten eingebettet werden, beschrieben und umfasst eine Inhaltsquelle, die die digitalen Daten in die Videodaten einbettet. Die Inhaltsquelle codiert die Videodaten dann zusammen mit den digitalen Daten, um einen Verteilungsmultiplex mit komprimierten Videodaten zu erzeugen. Ein Decodierer empfängt und dekomprimiert den Verteilungsmultiplex zur Wiedergabe der Videodaten mit den eingebetteten digitalen Daten. Ein Fernseher oder ein anderes Betrachtungsgerät detektiert und extrahiert dann die digitalen Daten aus den Videodaten.
Das Fernseh- oder andere Gerät verarbeitet die digitalen Daten, um Informationen zu empfangen, die zum Beispiel dem Betrachtungsgerät erlauben, einen gerade betrachteten Kanal zu identifizieren und einen Kanalwechsel zu erkennen; den betrachteten Inhalt zu identifizieren, einschließlich Kurzinhalt wie Unterbrecherwerbung; einen Ort für den Zugriff auf zusätzliche Informationen über den Inhalt (z.B. einen URL eines entfernten Servers) zu entdecken; den zeitlichen Ort in dem wiedergegebenen Inhalt zu identifizieren, im Idealfall bis auf ein Niveau von Pro-Abtastwert oder -Zugangseinheitgenauigkeit; und/oder einen zeitempfindlichen Ereignistrigger in Echtzeit zu empfangen.
Nunmehr mit Bezug auf 1A ist eine Blockdarstellung eines elektronischen Systems 110 gemäß einer Ausführungsform der vorliegenden Offenbarung gezeigt. Bei der Ausführungsform von 1A kann das elektronische System 110, aber ohne Beschränkung darauf, eine Inhaltsquelle 114, eine Set-Top-Box 118, eine Schnittstelle 126, einen Fernseher 122, ein optionales Netzwerk 134 und einen optionalen Server 130 umfassen. Bei alternativen Ausführungsformen kann das elektronische System 110 unter Verwendung von Komponenten und Konfigurationen zusätzlich zu oder anstelle von bestimmten der in Verbindung mit der Ausführungsform von 1A besprochenen Komponenten und Konfigurationen implementiert werden. Zum Beispiel kann ähnlich eine beliebige Anzahl von Fernsehern 122 in dem elektronischen System 110 eingesetzt werden. Außerdem müssen das Netzwerk 134 und der Server 130 nicht in allen Ausführungsformen der vorliegenden Offenbarung enthalten sein.
Bei der Ausführungsform von 1A kann die Inhaltsquelle 114 als eine oder mehrere elektronische Geräte oder andere Entitäten, die Inhaltsdaten, darunter Videodaten und Audiodaten, für Wiedergabe durch den Fernseher 122 erstellen und verteilen, implementiert werden. Bei der Ausführungsform von 1A kann die Inhaltsquelle 114 als eine beliebige geeignete Entität implementiert werden. Zum Beispiel kann die Inhaltsquelle 114 eine Fernsehausstrahlungsanstalt, eine Kabelfernseh-Verteilungsanstalt, eine Satellitenfernseh-Verteilungsanstalt oder eine Internet-Serverentität umfassen. Zusätzliche Einzelheiten hinsichtlich der Implementierung und Benutzung der Inhaltsquelle 114 werden nachfolgend in Verbindung mit 2–4 weiter besprochen.
Bei der Ausführungsform von 1A erzeugt die Inhaltsquelle 114 einen codierten Verteilungsmultiplex, der die Inhaltsdaten in einem komprimierten Format enthält, und verteilt den Verteilungsmultiplex mittels eines Verteilungsnetzes über den Pfad 116 (z.B. einen terrestrischen Fernsehausstrahlungskanal, ein Kabel-TV-Netz, einen Satellitenausstrahlungskanal usw.) an eine Empfangsvorrichtung zur Decodierung. Bei bestimmen Ausführungsformen können zwischen der Inhaltsquelle 114 und der Set-Top-Box 118 zusätzliche Geräte oder Entitäten angeordnet sein. Beispiele für solche Entitäten wären, aber ohne Beschränkung darauf, ein Ausstrahlungsnetz-Affiliierter und ein Dienstanbieter (wie etwa eine Satelliten- oder Kabelkopfstelle).
Bei der Ausführungsformen von 1A decodiert die Set-Top-Box 118 den codierten Verteilungsmultiplex zur Erzeugung unkomprimierter A/V-Daten (Videodaten und Audiodaten), die über eine geeignete Schnittstelle 126 dem Fernseher 122 zugeführt werden. Bei der Ausführungsform von 1A kann die Schnittstelle 126 auf eine beliebige effektive Weise implementiert werden. Zum Beispiel kann die Schnittstelle 126 gemäß einem HDMI-Standard (High Definition Multimedia Interface) implementiert werden, der eine Hochgeschwindigkeits-Parallelschnittstelle zum Abliefern von unkomprimierten Videodaten und Audiodaten und/oder Steuer-/Timingsignalen an den Fernseher 122 bereitstellt. Der Fernseher 122 kann dann die Videodaten und Audiodaten zur Benutzung durch einen Systembenutzer reagierend empfangen und reproduzieren. Zusätzliche Einzelheiten bezüglich der Implementierung und Benutzung des Fernsehers 122 werden nachfolgen in Verbindung mit 5–6 weiter besprochen.
Bei der Ausführungsform von 1A unterstützt das elektronische System 110 zusätzliche Dienste in Bezug auf die Hauptinhaltsdaten. Zu den zusätzlichen Diensten gehören DOs (Declarative Objects), die auch als Anwendungen bezeichnet werden, um das interaktive Erlebnis des Benutzers zu gewährleisten. DOs und andere zusätzliche Dienste werden in dem vorläufigen ATSC-Standard: Interactive Service Standard A/105: 2014 (S13-2-389r7, Rev. 7 - 24 April 2014) beschrieben, auf den hiermit vollständig Bezug genommen wird.
Der Fernseher 122 kann die Metadaten von einer beliebigen geeigneten Quelle erhalten, darunter, aber ohne Beschränkung darauf, die Inhaltsquelle 114 oder der Server 130. Bei der Ausführungsform von 1A kann der Fernseher 122 über ein beliebiges effektives Netzwerk 134, darunter, aber ohne Beschränkung darauf, das Internet, mit dem Server 130 kommunizieren. Zusätzliche Einzelheiten hinsichtlich Erzeugung, Verteilung und Benutzung von Metadaten werden nachfolgend weiter besprochen.
Die vorliegende Offenbarung umfasst im Allgemeinen das Einbetten digitaler Daten (z.B. Metadaten) in ein Videosignal, so dass die digitalen Daten durch Empfangsgeräte wie den Fernseher 122 schnell und leicht wiedergewonnen werden können. Bei bestimmten Ausführungsformen fügt die Inhaltsquelle 114 die digitalen Daten in ein verteiltes Videosignal ein, so dass das digitale die Verteilungskette durchläuft, über eine komprimierte Schnittstelle (von einem Kabel-, Satelliten- oder IPTV-Dienstanbieter) in die Wohnung eines Verbrauchers kommt, in der Set-Top-Box 118 dekomprimiert wird und dann in einem unkomprimierten Format zum Fernseher 122 kommt, wobei der Fernseher 122 die eingebetteten Metadaten zur Unterstützung der zusätzlichen Dienste, wie etwa synchronisierter DOs, abruft und benutzt. Die obigen Techniken können umgehen, dass Dienstanbieter oder andere Entitäten absichtlich oder unabsichtlich den Zugriff des Verbrauchers auf die Metadaten, der erforderlich ist, um erweiterte Funktionalität für den Fernseher 122 bereitzustellen, blockieren.
Bestimmte Kabel-, Satelliten- und IPTV-Entitäten stellen Systembenutzern typischerweise Set-Top-Boxes bereit, die über unkomprimierte HDMI-Videoschnittstellen oder andere geeignete Mittel an Digitalfernseher angeschaltet sind. Wenn ein Inhaltseigentümer wünscht, mit den Inhaltsdaten Metadaten (wie etwa einen URL, ein Applet usw.) aufzunehmen, und wenn sich diese Metadaten mit den Inhaltsdaten als ein getrennter digitaler Strom (oder als Metadaten in dem komprimierten Bitstrom) ausbreiten, werden die Metadaten in der Set-Top-Box 118 blockiert.
Die Set-Top-Box 114 leitet typischerweise ergänzende Datenströme nicht in den Verteilungsmultiplex, weil die Set-Top-Box nur Audiodaten und Videodaten decodiert und dann nur die unkomprimierten Videodaten und Audiodaten zum Fernseher hinüberleitet. Dem Fernseher sind deshalb ergänzende Datenströme nicht verfügbar. Wenn Dienstanbieter (diejenigen, die die Set-Top-Boxes anbieten) erachten, dass Bereitstellung von Zugriff auf etwaige Ergänzungsdaten für ihr Geschäftsmodell konkurrenzfähig ist, können sie ferner nicht geneigt sein, der Verbraucherelektronikindustrie durch Bereitstellen eines solchen Zugriffs zu helfen.
Durch Einbetten digitaler Daten in die Videodaten überdauern die digitalen Daten Komprimierung/Dekomprimierung und können intakt am Fernseher 122 ankommen. Bei Ausführungsformen der vorliegenden Offenbarung werden die digitalen Daten ferner auf eine Weise als Wasserzeichen eingebettet, die seine Sichtbarkeit berücksichtigt. Anders ausgedrückt bettet die vorliegende Offenbarung vorteilhafterweise digitale Daten in das Videosignal auf eine Weise ein (codiert in dem Videobild, nicht als getrennter Ergänzungsdatenstrom), die die Sichtbarkeit für einen Betrachter vermindert. Die vorliegende Offenbarung überwindet deshalb nicht nur erfolgreich das oben besprochene Architekturhindernis, sondern begrenzt auch die Sichtbarkeit des eingebetteten Wasserzeichens, um mögliche Ablenkung des Betrachters zu vermeiden. Die Implementierung und Benutzung des in 1A dargestellten elektronischen Systems 110 werden nachfolgend weiter besprochen.
Nunmehr mit Bezug auf 1B ist eine Darstellung einer Anzeige 138 von dem Fernseher 122 von 1A gemäß einer Ausführungsform der vorliegenden Offenbarung gezeigt. Die Ausführungsform von 1B wird zur Veranschaulichung bereitgestellt, und bei alternativen Ausführungsformen kann die Anzeige 138 unter Verwendung von Komponenten und Konfigurationen zusätzlich zu oder anstelle von bestimmten der in Verbindung mit der Ausführungsform von 1B besprochenen Komponenten und Konfigurationen implementiert werden.
Bei der Ausführungsform von 1B umfasst die Anzeige 138 eine Hauptbildschirmregion, die typischerweise durch die Inhaltsquelle 114 (1A) bereitgestellte Videodaten anzeigt. Bei der Ausführungsform von 1B umfasst die Anzeige 138 außerdem ein DO 144, das in einem diskreten Bereich residiert, der auf der Anzeige 138 angezeigt wird, um eine beliebige gewünschte Art von zusätzlichen Informationen bereitzustellen. Bei verschiedenen Ausführungsformen kann das DO 144 in beliebiger gewünschter Form oder Größe implementiert und an einem beliebigen geeigneten Ort angezeigt werden. Ferner wird eine beliebige gewünschte Anzahl verschiedener DOs gleichermaßen in Betracht gezogen, einschließlich der Möglichkeit mehrerer DOs auf der Anzeige zu einem beliebigen gegebenen Zeitpunkt.
Bei der Ausführungsform von 1B unterstützt die Anzeige 138 synchronisierte DOs, die fungieren, um Informationen bereitzustellen, die mit den Videodaten, die gerade auf der Anzeige 138 angezeigt werden, in Bezug stehen (synchronisiert sind). Zum Beispiel kann man mit dem DO 144 Finanzinformationen von spezifischer Relevanz für den Betrachter (z.B. sein Investitionsportfolio) während eines Fernsehprogramms bezüglich Wirtschaftsnachrichten oder Investitionsthemen anzeigen. In einem anderen Beispiel kann man mit dem DO 144 während eines im Fernsehen ausgestrahlten Autorennens relevante Informationen oder Statistiken hinsichtlich spezifischer Rennfahrer, Rennautos oder Autorennen allgemein anzeigen.
Nunmehr mit Bezug auf 2A ist eine Blockdarstellung für eine Ausführungsform der Inhaltsquelle 114 von 1A gemäß der vorliegenden Offenbarung gezeigt. Bei der Ausführungsform von 2A kann die Inhaltsquelle 114, aber ohne Beschränkung darauf, eine Zentralverarbeitungseinheit (CPU) 212, einen Quellenspeicher 220 und Eingabe-/Ausgabeschnittstellen (E/A-Schnittstellen) 224 umfassen. Bei alternativen Ausführungsformen kann die Inhaltsquelle 114 unter Verwendung von Komponenten und Konfigurationen zusätzlich zu oder anstelle von den in Verbindung mit der Ausführungsform von 2A besprochenen Komponenten und Konfigurationen implementiert werden. Zusätzlich kann die Inhaltsquelle 114 als Alternative als eine beliebige andere gewünschte Art von elektronischer Vorrichtung oder Entität implementiert werden.
Bei der Ausführungsform von 2A kann die CPU 212 so implementiert werden, dass sie beliebige geeignete und kompatible Mikroprozessorvorrichtung(en) umfasst, die vorzugsweise Softwareanweisungen ausführen, um dadurch den Betrieb der Inhaltsquelle 114 zu steuern und zu verwalten. Bei der Ausführungsform von 2A kann der Quellenspeicher 220 so implementiert werden, dass er eine beliebige Kombination gewünschter Speichervorrichtungen umfasst, darunter, aber ohne Beschränkung darauf, Festwertspeicher (ROM), Direktzugriffsspeicher (RAM) und verschiedene Arten von nichtflüchtigem Speicher, wie etwa Disketten oder Festplatten. Die Inhalte und Funktionalität des Quellenspeichers 220 werden nachfolgend in Verbindung mit 3 und 4 weiter besprochen.
Bei der Ausführungsform von 2A können die E/A-Schnittstellen 224 eine oder mehrere Eingabe- und/oder Ausgabeschnittstellen zum Empfangen und/oder Senden beliebiger erforderlicher Arten von Informationen für die Inhaltsquelle 114 umfassen. Zum Beispiel kann bei der Ausführungsform von 2A die Inhaltsquelle 114 die E/A-Schnittstellen 224 zur Kommunikation mit anderen Entitäten in dem elektronischen System 110 (1A) benutzen. Ferner kann ein Systembenutzer mit den E/A-Schnittstellen 224 durch Benutzung beliebiger geeigneter und effektiver Techniken mit der Inhaltsquelle 114 kommunizieren. Zusätzliche Einzelheiten hinsichtlich der Inhaltsquelle 114 werden nachfolgend in Verbindung mit 2B, 3–4 weiter besprochen.
2B zeigt eine beispielhafte Informationsbereitstellungsvorrichtung 250, die zum Beispiel von der Inhaltsquelle 114 zum Bereitstellen eines Bildes verwendet wird, in dem mehrere Symbole, darunter ein Einlaufmuster und/oder ein oder mehrere zum Wiedergewinnen von Werten der mehreren Symbole verwendete Parameter und/oder andere digitale Daten (z.B. Metadaten, Anwendungsdaten, Programmführerdaten, Einblendungsdaten usw.), codiert sind. Allgemein ausgedrückt kann ein einzelner Inhaltsanbieter über einen oder mehrere Transportströme mehrere Programme (z.B. Programme A und B) bereitstellen. Zum Beispiel werden Audio-, Video- und Einblendungsdaten für Programm A einem Codierer 256A zugeführt, während Audio-, Video- und Einblendungsdaten für Programm B einem Codierer 256B zugeführt werden. Ein Transportstrom-Multiplexer 258 empfängt die Ausgaben der Codierer 256A, 256B und stellt eine Ausgabe bereit, die über ein physisches Kanalmedium, wie etwa eine terrestrische, Kabel- oder Satellitenausstrahlung, verteilt werden kann. Eine Kommunikationsschnittstelle 260 (z.B. ein terrestrischer Ausstrahlungssender) verteilt die Ausgabe von dem Transportstrom-Multiplexer 258 über das physische Kanalmedium.
Die Informationsbereitstellungsvorrichtung 250 umfasst ferner einen Digitaldatengenerator 252 und Digitaldateneinfüger 254. Der Digitaldatengenerator 1102 erzeugt in die Videoteile von Programm A einzubettende digitale Daten.
Der Digitaldateneinfüger 254 bettet die erzeugten digitalen Daten in die Videoteile von Programm A ein. Bei bestimmten Ausführungsformen bettet der Digitaldateneinfüger 254 auch ein vorbestimmtes Einlaufmuster ein, das angibt, dass digitale Daten in den Videoteil eingebettet wurden. Ferner bettet der Digitaldateneinfüger 254 gegebenenfalls Parameter (z.B. einen oder mehrere Luminanzwerte, die zur Codierung von Symbolen verwendet werden, einen oder mehrere Slice-Punkte usw.) für eine Empfangsvorrichtung 550 (wie zum Beispiel in 5B dargestellt) zur Verwendung zur Wiedergewinnung der eingebetteten digitalen Daten ein.
Bei bestimmten Ausführungsformen codiert der Digitaldateneinfüger 254 die erzeugten digitalen Daten in Luminanzwerten in einer oder mehreren Zeilen (z.B. Zeile 1 und gegebenenfalls Zeile 2) von aktivem Video. Der Digitaldateneinfüger 252 codiert die digitalen Daten jeweils in einem verschiedenen Einzelbild oder jeder der einen oder mehreren Zeilen des Videos. Wie oben beschrieben, können die digitalen Daten für eine vorbestimmte Anzahl von Einzelbildern wiederholt werden.
Gegebenenfalls wiederholt der Digitaldateneinfüger 254 die Codierung der erzeugten Metadaten in Zeile 2 für bessere Robustheit aufgrund von Fehlern, die bei der Codierung oder Umcodierung eingeführt werden können. Aufgrund der Beschaffenheit der Videocodierung hat sich gezeigt, dass die Integrität von Metadaten auf Zeile 1 verbessert wird, wenn dieselben Daten auf Zeile 2 wiederholt werden. Außerdem können andere Zeilen, wie etwa die letzten 1 oder 2 Zeilen, zum Wiederholen derselben Daten verwendet werden.
Nunmehr mit Bezug auf 3 ist eine Blockdarstellung für eine Ausführungsform des Quellenspeichers 220 von 2A gemäß der vorliegenden Offenbarung gezeigt. Bei der Ausführungsform von 3 umfasst der Quellenspeicher 220, aber ohne Beschränkung darauf, eine oder mehrere Quellenanwendungen 312, Videodaten 316, Audiodaten 318, einen Codierer 320, Metadaten 322, einen Metadaten-Manager 324 und verschiedene Information 328. Bei alternativen Ausführungsformen kann der Quellenspeicher 220 Komponenten zusätzlich zu oder anstelle von den in Verbindung mit der Ausführungsform von 3 besprochenen Komponenten umfassen.
Bei der Ausführungsform von 3 kann die Quellenanwendung bzw. können die Quellenanwendungen 312 Programmanweisungen umfassen, die vorzugsweise durch die CPU 212 (2A) ausgeführt werden, um verschiedene Funktionen und Operationen für die Inhaltsquelle 114 auszuführen, darunter zum Beispiel Steuerung und/oder Implementierung der Informationsbereitstellungsvorrichtung 250. Die konkrete Beschaffenheit und Funktionalität der Quellenanwendung(en) 312 variiert vorzugsweise abhängig von Faktoren wie der spezifischen Art und konkreten Funktionalität der entsprechenden Inhaltsquelle 114. Bei der Ausführungsform von 3 können die Videodaten 316 beliebige geeignete Informationen oder Daten für Anzeige auf oder Verarbeitung in dem Fernseher 122 (1A) umfassen. Ähnlich können die Audiodaten 318 beliebige geeignete Informationen oder Daten für Wiedergabe durch den Fernseher 122 (1A) umfassen.
Bei der Ausführungsform von 3 ist der Codierer 320 ausgelegt zum Konvertieren der Videodaten 316 und der Audiodaten 318 in einen komprimierten Verteilungsmultiplex zur Verteilung an den Fernseher 122. Bei der Ausführungsform von 3 koordiniert und verwaltet der Metadaten-Manager 324 verschiedene Funktionen zum Erzeugen der Metadaten 322 (oder anderer digitaler Daten) und Einbetten der Metadaten 322 als integralen Teil der Videodaten 316 gemäß der vorliegenden Offenbarung. Die verschiedenen Informationen 328 können beliebige zusätzliche Informationen zur Benutzung durch die Inhaltsquelle 114 umfassen.
Bei der Ausführungsform von 3 wird die vorliegende Offenbarung als hauptsächlich als Software implementiert offenbart und besprochen. Bei alternativen Ausführungsformen können einige oder alle der Funktionen der vorliegenden Offenbarung jedoch durch geeignete elektronische Hardwareschaltungen ausgeführt werden, die dafür ausgelegt sind, verschiedene Funktionen auszuführen, die den Funktionen der Softwaremodule, die hier besprochen werden, äquivalent sind. Zusätzliche Einzelheiten hinsichtlich der Funktionalität des Metadaten-Managers 324 und der Metadaten 322 werden nachfolgend weiter besprochen.
Nunmehr mit Bezug auf 4 ist eine Blockdarstellung der Metadaten 322 von 3 gemäß einer Ausführungsform der vorliegenden Offenbarung gezeigt. Bei der Ausführungsform von 4 können die Metadaten 322, aber ohne Beschränkung darauf, Triggerdaten 412, DO-Inhalt 416, Synchronisations(Sync)-Daten 418, Inhaltsidentifikations(ID)-Daten 420, Zeigerdaten 422 und verschiedene Informationen 424 umfassen. Bei alternativen Ausführungsformen können die Metadaten 322 unter Verwendung verschiedener Komponenten und Funktionalitäten zusätzlich zu oder anstelle von den in Verbindung mit der Ausführungsform von 4 besprochenen Komponenten und Funktionalitäten implementiert werden.
Bei der Ausführungsform von 4 können die Triggerdaten 412 eine beliebige Art von Informationen zum Steuern von Prozessen in Bezug auf das DO 144 (1B) umfassen. Zum Beispiel können die Triggerdaten 412, aber ohne Beschränkung darauf, Daten, die das DO 144 mit Bezug auf visuelles Aussehen und Verhalten definieren, durch ein DO präsentierte Informationen (wie etwa Auslesewerte), DO-Grafikzustände (wie Farben, Pegel oder Einstellungen) und optimalen Ort, optimale Form, optimale Größe und optimale Anzeigezeiten des DO umfassen. Bei bestimmten Ausführungsformen enthalten die Triggerdaten 412 einen oder mehrere Trigger, die verschiedene zeitbezogene Signalisierungsfunktionen zur Unterstützung interaktiver Dienste ausführen, sowie es in dem oben erwähnten vorläufigen ATSC-Standard A/105: 2014 definiert wird.
Bei einer Ausführungsform kann der Trigger als drei Teile umfassend betrachtet werden, wobei zwei erforderlich sind und der dritte optional ist: <Domänennamenteil>/<Verzeichnispfad>[?<Parameter>]. <Domänennamenteil> bezieht sich auf einen registrierten Internet-Domänennamen. <Verzeichnispfad> ist eine beliebige Zeichenkette, die einen Verzeichnispfad unter der Kontrolle und Verwaltung der Entität, die Rechte an dem identifizierten Domänennamen besitzt, identifiziert. Im TDO-Modell soll die Kombination aus <Domänennamenteil> und <Verzeichnispfad> eindeutig eine TPT identifizieren, die durch einen Empfänger verarbeitet werden kann, um Interaktivität zu dem zugeordneten Inhalt hinzuzufügen. Im Direktausführungsmodell soll die Kombination von <Domänennamenteil> und <Verzeichnispfad> eindeutig das zu startende DO identifizieren. Der Teil <Parameter> des Triggers ist optional. Wenn er vorliegt, kann er einen oder mehrere dem Trigger zugeordnete Parameter übermitteln. Ein beispielhafter Trigger ist xbc.tv/e12.
Der Trigger ist ein Datenobjekt, das gegebenenfalls an einen bestimmten Posten oder ein bestimmtes Segment von Inhalt (z.B. ein Fernsehprogramm) gebunden ist, der sich auf eine spezifische TDO-Instanz bezieht, durch Verwendung eines Dateinamens oder einer Kennung für ein Objekt, das bereits heruntergeladen wurde oder herunterzuladen ist. Bestimmte TDO ergeben nur in Verbindung mit bestimmtem Inhalt Sinn. Ein Beispiel ist ein TDO, das Zuschauerantwortdaten, wie etwa Wählen bei einer Spielshow oder einem Wettbewerb, sammelt.
Bei der Ausführungsform von 4 kann der DO-Inhalt 416 beliebige Inhaltsdaten zur Anzeige in dem DO 144 umfassen. Bei bestimmten Ausführungsformen kann der DO-Inhalt 416 als Alternative von anderen Quellen oder Entitäten als den Metadaten 322 erhalten werden. DOs können diskrete Bereiche umfassen, die auf dem Fernseher 122 angezeigt werden, um eine beliebige gewünschte Art von Informationen bereitzustellen. Zusätzliche Einzelheiten hinsichtlich der DOs werden oben in Verbindung mit 1B weiter bereitgestellt. Bei der Ausführungsform von 1A unterstützt das elektronische System 110 vorteilhafterweise synchronisierte DOs, die Informationen bereitstellen, die mit den Hauptinhaltsdaten, die gerade auf dem Fernseher 122 angezeigt werden, in Beziehung stehen (synchronisiert sind). Um synchronisierte DOs (z.B. getriggerte deklarative Objekte (TDOs)) erfolgreich zu unterstützen, stellt das elektronische System 110 dem Fernseher 122 auch bestimmte Arten von Metadaten (z.B. Trigger, TDO-Parametertabelle usw.) bereit.
Ein TDO ist ein herunterladbares Softwareobjekt, das durch einen Inhaltsanbieter, Inhaltsverfasser oder andere Dienstanbietertypen erzeugt wird, das deklarativen Inhalt (z.B. Text, Grafiken, beschreibendes Markup, Skripts und/oder Audio) umfasst, dessen Funktion auf gewisse Weise an den Inhalt, den er begleitet, gebunden ist. Eine Ausführungsform des TDO wird in dem vorläufigen ATSC-Standard A/105: 2014 beschrieben. Das TDO ist jedoch nicht auf die in dem vorläufigen ATSC-Standard beschriebene Struktur beschränkt, da viele darin als Teil eines TDO definierte Attribute sich in einem Trigger befinden könnten oder umgekehrt oder abhängig von der Funktion oder Triggerung eines bestimmten TDO überhaupt nicht vorliegen können.
Das TDO wird im Allgemeinen als „deklarativer“ Inhalt betrachtet, um es von „ausführbarem“ Inhalt, wie etwa einem Java-Applet oder einer Anwendung, die auf einer Betriebssystemplattform läuft, zu unterscheiden. Obwohl gewöhnlich das TDO als ein deklaratives Objekt betrachtet wird, unterstützt ein TDO-Player (z.B. die DO-Engine) eine Skript-Sprache, die eine objektorientierte Programmiersprache ist (z.B. JavaScript). In den hier gezeigten Beispielen werden die TDOs zum Beispiel über den Server 130 vor dem Zeitpunkt ihrer Ausführung, so dass das TDO verfügbar ist, wenn es benötigt wird, von einem Inhalts- oder Dienstanbieter empfangen. Außerdem muss kein explizites Triggersignal notwendig sein, und ein TDO kann selbsttriggernd oder durch eine bestimmte andere Aktion als Empfang eines Triggersignals getriggert sein. Verschiedene Normenbehörden können zugeordnete Verhaltensweisen, Erscheinungsformen, Triggeraktionen und Transportverfahren für Inhalt und Metadaten für ein TDO definieren. Außerdem können Anforderungen hinsichtlich Timing-Genauigkeit von TDO-Verhaltensweisen relativ zu Audio/Video durch Normenbehörden definiert werden.
Die TPT enthält Metadaten über ein TDO eines Inhaltssegments und definiert ein oder mehrere Ereignisse für das TDO. Die Ereignisse des TDO können auf der Basis eines aktuellen Timings des wiedergegebenen Inhalts oder durch einen Verweis auf ein oder mehrere in einem oder mehreren Triggern enthaltene Ereignisse getriggert werden. Zum Beispiel können der Empfangsvorrichtung 550 in der TPT ein oder mehrere einem Trigger zugeordnete Parameter bereitgestellt werden.
Während ein Trigger angibt, dass die Zeit für das TDO gekommen ist, eine bestimmte Aktion auszuführen, kann eine Reihe getimeter Aktionen ohne einen Trigger abgespielt werden, zum Beispiel durch Verwendung der TPT. Die TPT oder eine getrennte AMT (Activation Messages Table – Aktivierungsnachrichtentabelle) stellt gegebenenfalls Timinginformationen für verschiedene interaktive Ereignisse relativ zur „Medienzeit“ bereit. Jeder Posten von interaktivem Inhalt weist eine Zeitlinie für sein Abspielen auf; ein Zeitpunkt auf dieser Zeitlinie wird als Medienzeit bezeichnet. Zum Beispiel kann ein 30 Minuten langes Programm zur Medienzeit 10 Minuten, 41 Sekunden und 2 Einzelbilder vom Anfang des Programms oder zur Medienzeit 10:41 + 02 ein interaktives Ereignis aufweisen. Die TPT kann einen Eintrag umfassen, der die Einzelheiten des Ereignisses angibt, das zum Zeitpunkt 10:41 + 02 auftreten soll. Nachdem die Empfangsvorrichtung 550 das aktuelle Timing relativ zum Start des Programms bestimmt hat, kann sie die TPT und gegebenenfalls die AMT zum Abspielen aller nachfolgenden Ereignisse verwenden.
Bei der Ausführungsformen von 4 können die Synchronisations(Sync)-Daten 418 beliebige geeignete Mittel umfassen, um es dem Fernseher 122 zu erlauben, die Metadaten 322 zu detektieren, während sie in Videodaten 316 eingebettet werden. Bei bestimmten Ausführungsformen können die Sync-Daten 418 ein vordefiniertes Identifikationsmuster (z.B. ein vorbestimmtes Einlaufmuster) umfassen, das die Anwesenheit und bei einer Ausführungsform einen spezifischen Ort der Metadaten 322 in den Videodaten 316 angibt. Metadaten können in Video durch Verwendung von Modulation des Luminanz-(Helligkeits-)Werts des Videos codiert werden. Zum Beispiel kann in einer Videozeile jede Menge einer vorbestimmten Anzahl von Pixeln (z.B. 8) einem „Symbol“ entsprechen, wobei der Luminanzwert jedes Pixels auf einen von vier Werten gesetzt wird. In diesem Fall führt jedes Symbol zwei Informationsbit. Bei anderen Ausführungsformen kann jede Menge von Pixeln auf einem von zwei Pegeln gesetzt werden. In diesem Fall würde jede Menge ein Informationsbit führen.
Bei einer Ausführungsform wird eine vorbestimmte Anzahl von Symbolen (z.B. 8 oder 16) verwendet, um ein vorbestimmtes Einlaufmuster zu definieren, mit dem angegeben wird, ob ein Videoeinzelbild markiert ist. Zum Beispiel können die ersten acht Symbole auf ein festes Muster [3, 3, 0, 0, 2, 1, 3, 0] gesetzt werden, um es einem Detektor zu erlauben, schnell zu identifizieren, ob das Video ein Wasserzeichen enthält oder nicht. Wenn jedes Symbol 1-Bit entspricht, könnte das feste Muster [1, 1, 1, 1, 0, 0, 0, 0, 1, 0, 0, 1, 0, 1, 1, 0] sein, und bei bestimmten Ausführungsformen wird die Anzahl von Symbolen erhöht (z.B. auf 16). Ferner können für verschiedene Protokollversionen verschiedene Einlaufmuster verwendet werden, so dass Rückwärtskompatibilität erzielt werden kann, indem sichergestellt wird, dass Implementierungen der 1.0-Version jegliche Daten verwerfen, die das Einlaufmuster der Version 1.0 nicht umfassen.
Bei der Ausführungsform von 4 können die Inhalts-ID-Daten 420 beliebige geeignete Informationen zum Identifizieren des spezifischen Inhalts eines gegebenen entsprechenden Programms umfassen. Bei einer Ausführungsform können die Inhalts-ID-Daten 420 eine ISAN-Nummer (International Standard Audio-Visual Number) als Kennung umfassen. Bei einer anderen Ausführungsform können die Inhalts-ID-Daten 420 einen EIDR-Code (Entertainment Industry Data Registry) und/oder eine Medienzeit umfassen. Zum Beispiel können die Inhalts-ID-Daten 420 eine Inhalts-ID-Nachricht umfassen, die dafür ausgelegt ist, einen 12-Byte-EIDR-Code und eine 2-Byte-Medienzeit zu führen. Eine beispielhafte Bitstromsyntax der Inhalts-ID-Nachricht lautet wie folgt:
Tabellen_ID – Auf den Wert 0x01 gesetzt. Identifiziert die nachfolgenden Daten als eine Inhalts_ID_Nachricht().
Tabellen_Länge – Gibt die Anzahl der zum Ende des CRC zu folgenden Byte an. In diesem Fall ist der Wert 18.
EIDR – Ein 96-Bit-Wert, der den Wert des EIDR-Codes (Entertainment Industry Data Registry) für diesen Inhaltsposten führen soll.
Medien_Zeit – Eine 16-Bit-Zahl, die die Medienzeit im Inhalt in Sekunden repräsentiert, wobei der Wert 0 die erste Sekunde des Inhaltspostens angibt.
CRC_32 – Eine 32-Bit-CRC-Prüfsumme über die volle Nachricht bis zum CRC_32-Feld selbst, aber nicht einschließlich dieses. Ein beispielhaftes Generatorpolynom ist 1 + x + x² + x⁴ + x⁵ + x⁷ + x⁸ + x¹⁰ + x¹¹ + x¹² + x¹⁶ + x²² + x²³ + x²⁶.
Bei einer Ausführungsform kann die Inhalts-ID-Nachricht ferner oder als Alternative ein Anzeigen-ID-Feld für kommerzielles Material umfassen. Das Anzeigen-ID-Feld ist ein 96-Bit-Feld, das den dem Inhalt zugeordneten Anzeigen-ID-Code repräsentiert.
Bei der Ausführungsform von 4 können die Zeigerdaten 422 eine beliebige Art von erforderlichen Informationen umfassen, mit denen der Fernseher 122 zusätzliche Informationen (wie etwa DO-Inhalt oder Triggerdaten) zur Verwendung bei Produzieren der synchronisierten DOs 144 findet und erhält. Zum Beispiel können die Zeigerdaten 422, aber nicht beschränkt darauf, einen URL umfassen, der einen Internetort identifiziert, an dem weitere Informationen bezüglich der gerade angezeigten Videodaten 316 gefunden werden können. Der URL könnte eine Website auf dem Sever 130 (1A) oder anderen Ort repräsentieren, die weitere Informationen über ein Produkt, für das geworben wird, einen URL einer Startseite einer Episode oder Serie, eine Website, auf der ein Zuschauer sich für einen Dienst anmelden oder über ein Programm abstimmen könnte usw bereitstellt.
Bei der Ausführungsform von 4 können die verschiedenen Informationen 424 beliebige zusätzliche Informationen zur Benutzung durch den Fernseher 122 umfassen. Zum Beispiel können die verschiedenen Informationen 424 bei bestimmten Ausführungsformen ein oder mehrere Skripts oder ausführbare Programme umfassen. Bei einer Ausführungsform umfassen die verschiedenen Informationen 424 eine Einzelbild-Zählnachricht. Der Zweck der Einzelbild-Zählnachricht ist die Bereitstellung feinerer Granularität für das in dem Medien_Zeit-Feld der Inhalts-ID-Nachricht gegebene Timing und die Angabe der ursprünglichen Einzelbildrate des Inhalts (zum Zeitpunkt des Anwendens des Wasserzeichens). Eine beispielhafte Bitstromsyntax der Einzelbild-Zählnachricht lautet wie folgt:
Tabellen_ID – Auf einen Wert 0x02 gesetzt. Identifiziert die folgenden Daten als eine Einzelbild_Zähl_Nachricht().
Tabellen_Länge – Gibt die Anzahl der folgenden Byte an. In diesem Fall wurde der Wert auf 6 gesetzt.
Original_Einzelbild_Rate – Ein 8-Bit-Unsigned-Integer, der die Einzelbildrate in Einzelbildern pro Sekunde des Originalinhalts zum Zeitpunkt des Anwendens des Wasserzeichens angibt. Der Wert wird für animierten Inhalt auf 24 und für andere Inhaltstypen auf 30 gesetzt.
Einzelbild – Ein 8-Bit-Unsigned-Integer, der die Einzelbildnummer in der durch Medien_Zeit identifizierten Ein-Sekunden-Periode angibt. Die Zählung basiert auf null.
CRC_32 – Eine 32-Bit-CRC-Prüfsumme über die volle Nachricht bis zum CRC_32-Feld selbst, aber nicht einschließlich dieses. Ein beispielhaftes Generatorpolynom ist 1 + x + x² + x⁴ + x⁵ + x⁷ + x⁸ + x¹⁰ + x¹¹ + x¹² + x¹⁶ + x²² + x²³ + x²⁶.
Zusätzliche Einzelheiten bezüglich der Erzeugung, Verteilung und Benutzung der Metadaten 322 werden nachfolgend weiter besprochen.
Nunmehr mit Bezug auf 5A ist eine Blockdarstellung für eine Ausführungsform des Fernsehers (TV) 122 von 1A gemäß der vorliegenden Offenbarung gezeigt. Bei der Ausführungsform von 5A kann der TV 122, aber ohne Beschränkung darauf, eine Zentral-verarbeitungseinheit (CPU) 512, eine Anzeige 138, einen TV-Speicher 520 und Eingabe-/Ausgabeschnittstellen (E/A-Schnittstellen) 524 umfassen. Bei alternativen Ausführungsformen kann der TV 122 unter Verwendung von Komponenten und Konfigurationen zusätzlich zu oder anstelle von den in Verbindung mit der Ausführungsform von 5A besprochenen Komponenten und Konfigurationen implementiert werden. Außerdem kann der TV 122 als Alternative als eine beliebige andere gewünschte Art von elektronischer Vorrichtung oder Entität implementiert werden.
Bei der Ausführungsform von 5A kann die CPU 512 so implementiert werden, dass sie beliebige geeignete und kompatible Mikroprozessorvorrichtung(en) umfasst, die vorzugsweise Softwareanweisungen ausführen, um dadurch den Betrieb des TV 122 zu steuern und zu verwalten. Die Anzeige 138 von 5 kann eine beliebige effektive Art von Anzeigetechnologie umfassen, darunter eine Anzeigevorrichtung mit organischen Leuchtdioden oder eine Flüssigkristallanzeigevorrichtung mit einem geeigneten Bildschirm, um einem Gerätebenutzer verschiedene Informationen anzuzeigen. Bei der Ausführungsform von 5A kann der TV-Speicher 520 so implementiert werden, dass er eine beliebige Kombination gewünschter Speichervorrichtungen umfasst, darunter, aber ohne Beschränkung darauf, Festwertspeicher (ROM), Direktzugriffsspeicher (RAM) und verschiedene Arten von nichtflüchtigem Speicher, wie etwa Disketten oder Festplatten. Die Inhalte und Funktionalität des TV-Speichers 520 werden nachfolgend in Verbindung mit 6 weiter besprochen.
Bei der Ausführungsform von 5A können die E/A-Schnittstellen 524 eine oder mehrere Eingabe- und/oder Ausgabeschnittstellen zum Empfangen und/oder Senden beliebiger erforderlicher Arten von Informationen für den TV 122 umfassen. Zum Beispiel kann bei der Ausführungsform von 5A der TV 122 die E/A-Schnittstellen 524 zur Kommunikation mit anderen Entitäten in dem elektronischen System 110 (1A) benutzen. Ferner kann ein Systembenutzer mit den E/A-Schnittstellen 524 durch Benutzung beliebiger geeigneter und effektiver Techniken mit dem TV 122 kommunizieren. Zusätzliche Einzelheiten bezüglich des TV 122 werden nachfolgend weiter besprochen.
5B ist eine Blockdarstellung einer Empfangsvorrichtung 550, die in dem TV 122 enthalten ist, gemäß einer Ausführungsform. Die Empfangsvorrichtung 550 ist eine digitale Fernsehempfängervorrichtung, die in den TV 122 oder die Set-Top-Box 118 integriert werden kann. Die Empfangsvorrichtung 550 umfasst einen Tuner/Demodulator 552, der Inhalt von einem oder mehreren Inhaltsanbietern, wie etwa einer terrestrischen Ausstrahlung oder Kabelfernsehübertragung, empfängt. Die Empfangsvorrichtung 550 kann auch oder als Alternative Inhalt von einer Satellitenausstrahlung empfangen. Der Tuner/Demodulator 552 empfängt einen Paketstrom (PS), wie etwa einen Transportstrom (TS) oder IP-Paketstrom, der durch den Demultiplexer 554 in Audio- und Video-(A/V-)Ströme gedemultiplext wird. Beispielhafte IP-Paketströme werden in dem ATSC-Mobil-DTV-Standard ATSC-M/H (A/153) und im eMBMS-Standard (Enhanced Multicast Multimedia Broadcast) beschrieben, die hiermit durch Bezugnahme vollständig aufgenommen werden. Das Audio wird durch einen Audiodecodierer 556 decodiert, und das Video wird durch einen Videodecodierer 558 decodiert. Ferner können über eine unkomprimierte A/V-Schnittstelle (z.B. eine HDMI-Schnittstelle), die selektiv benutzt werden kann, unkomprimierte A/V-Daten empfangen werden. Die unkomprimierten A/V-Daten können von einer Set-Top-Box, einem digitalen Videorekorder, einem DVD-Player oder einem beliebigen anderen Verbraucherelektronikgerät empfangen werden, das über die unkomprimierte A/V-Schnittstelle mit der Empfangsvorrichtung 550 verbunden ist.
Der TS kann ergänzende Informationen umfassen, wie etwa Einblendungsdaten und/oder TDOs und/oder Trigger und/oder TPTs und/oder Inhaltskennungen und/oder andere Metadaten. Außerdem können über das Kommunikationsnetz (z.B. das Internet) 134 und eine Netzwerkschnittstelle 560 der A/V-Inhalt und/oder die ergänzenden Informationen empfangen werden. Bei bestimmten Ausführungsformen werden ergänzende Informationen, wie etwa die Trigger und/oder Inhaltskennungen und/oder Einblendungsdaten und/oder anderen Metadaten als Symbole in den Videoteil des A/V-Inhalts eingebettet oder anderweitig eingefügt. Eine CPU 562 extrahiert die ergänzenden Informationen aus dem Videoteil des A/V-Inhalts und führt auf der Basis der extrahierten ergänzenden Informationen einen oder mehrere Prozesse aus.
Eine Speicherungseinheit 564 ist zum Speichern von NRT, aufgezeichnetem Inhalt oder per Internet abgeliefertem Inhalt, wie etwa IPTV (Internet Protocol Television) bereitgestellt. Der gespeicherte oder aufgezeichnete Inhalt kann durch Demultiplexen des in der Speicherungseinheit 564 gespeicherten Inhalts durch den Demultiplexer 554 auf eine ähnliche Weise wie bei anderen Quellen von Inhalt wiedergegeben werden. Die Speicherungseinheit 564 kann auch TDOs und/oder Trigger und/oder TPTs, die durch die Empfangsvorrichtung 550 beschafft werden, speichern.
Die Empfangsvorrichtung 550 arbeitet im Allgemeinen unter der Kontrolle mindestens eines Prozessors, wie etwa der CPU 562, der über einen oder mehrere Busse (z.B. den Bus 572) mit einem Arbeitsspeicher 566, Programmspeicher 568 und einem Grafiksubsystem 574 gekoppelt ist. Die CPU 562 kann Einblendungsdaten von dem Demultiplexer 554 sowie beliebige andere Informationen, wie etwa TDO-Ansagen und EPGs, die zur Wiedergabe von Grafiken verwendet werden, empfangen und leitet die Informationen zu dem Grafiksubsystem 574. Durch das Grafiksubsystem 574 ausgegebene Grafiken werden durch den Zusammensteller und die Videoschnittstelle 568 mit Videobildern kombiniert, um eine für Anzeige auf einer Videoanzeige geeignete Ausgabe zu produzieren. Bei einer Ausführungsform gewinnt die CPU 562 digitale Daten, wie etwa die ergänzenden Informationen, die in dem Videoteil des A/V-Inhalts codiert sind, durch Empfangen eines Bildes von dem Videodecodierer 558 wieder.
Ferner arbeitet die CPU 562 zum Ausführen von Funktionen der Empfangsvorrichtung 550 wie Verarbeitung betreffender Trigger, TDOs, TPTs, Browseroperationen, Metadaten, Extrahieren digitaler Daten, die in das Bild eingebettet sind, usw. Zu den Browseroperationen gehört Zugreifen auf einen Dienst, der durch einen URL spezifiziert wird, der durch das TDO oder den Trigger gegeben wird. Die CPU 550 arbeitet ferner zum Ausführen von Skript-Objekten (Steuerobjekten), die in dem TDO, seinem Trigger bzw. seinen Triggern usw. enthalten sind, zum Beispiel unter Verwendung der in 5C dargestellten DO-Engine 584.
Obwohl es in 5B nicht dargestellt ist, kann die CPU 562 mit einer beliebigen oder einer Kombination der Ressourcen der Empfangsvorrichtung 550 gekoppelt werden, um Steuerung einer oder mehrerer Funktionen zu zentralisieren. Bei einer Ausführungsform arbeitet die CPU 562 auch zur Beaufsichtigung der Steuerung der Empfangsvorrichtung 550, die den Tuner/Demodulator 552 und andere Fernsehressourcen umfasst.
In 5C ist eine mehr prozessorzentrische Ansicht der Empfangsvorrichtung 550 dargestellt. Speicher und Speicherung 564, 566, 568 sind kollektiv als Speicher 582 abgebildet. Ferner umfasst ein Prozessor 580 eine oder mehrere Verarbeitungseinheiten, wie etwa die CPU 562. Ähnlich sind die verschiedenen Demodulatoren, Decodierer usw., die digitale Fernsehsignale anfänglich verarbeiten, zusammen als Fernsehempfänger/-tuner 590 abgebildet. Die Empfangsvorrichtung 550 umfasst ferner eine Fernbedienung 598, die mit einer Fernbedienungs-Empfängerschnittstelle 596 kommuniziert. Außerdem ist die Anzeige 594 mit einer Anzeigeschnittstelle 592 verbunden, die zum Beispiel die unkomprimierte A/V-Schnittstelle und/oder den Zusammensteller 570 umfasst, und ist entweder eine mit der Empfangsvorrichtung 550 integrale Anzeige, wie bei einem Fernsehapparat, oder eine angeschlossene Anzeigevorrichtung, so wie es der Fall ist, wenn die Empfangsvorrichtung 550 in die Set-Top-Box 118 integriert ist.
Der Speicher 582 enthält verschiedene Funktionsprogrammmodule und -daten. Der Speicher 582 speichert die durch die Empfangsvorrichtung 550 benutzten Daten. Der Speicher 582 in der Empfangsvorrichtung 550 kann unter Verwendung von Datenträgerspeicherung-Form implementiert werden, sowie anderer Formen von Speicherung, wie etwa nichttransitorische Speicherungsvorrichtungen, wie zum Beispiel Netzwerk-Speichervorrichtungen, magnetische Speicherungselemente, magnetooptische Speicherungselemente, Flash-Speicher, Kernspeicher und/oder andere nichtflüchtige Speicherungstechnologien. Der Ausdruck „nichttransitorisch“ ist eine Begrenzung des Mediums selbst (d.h. greifbar, kein Signal) im Gegensatz zu einer Begrenzung bezüglich Datenspeicherungspersistenz (z.B. RAM im Gegensatz zu ROM).
Wenn ein TDO 586 empfangen wird, wird das TDO 586 im Speicher 582 gespeichert. Die TDO-Ausführung wird durch eine DO-Engine 584 ausgeführt. Das TDO präsentiert, wenn es durch die DO-Engine 584 ausgeführt wird, Hilfsinhalt auf der Basis eines oder mehrerer dem TDO zugeordneter Trigger. Außerdem speichert der Speicher 582 eine TPT 568, die bei einer Ausführungsform einen oder mehrere Parameter für jeden dem TDO zugeordneten Trigger definiert.
Nunmehr mit Bezug auf 6 ist eine Blockdarstellung für eine Ausführungsform des TV-Speichers 520 von 5A gemäß der vorliegenden Offenbarung gezeigt. Bei der Ausführungsform von 6 umfasst der TV-Speicher 520, aber ohne Beschränkung darauf, eine oder mehrere TV-Anwendungen 612, Videodaten 316, Audiodaten 318, ein Detektionsmodul 620 und ein Extraktionsmodul 622, ein Metadatenmodul 624, Metadaten 322 und verschiedene Informationen 628. Bei alternativen Ausführungsformen kann der TV-Speicher 520 Komponenten zusätzlich zu oder anstelle von den in Verbindung mit der Ausführungsform von 6 besprochenen Komponenten umfassen.
Bei der Ausführungsform von 6 kann die TV-Anwendung bzw. können die TV-Anwendungen 312 Programmanweisungen umfassen, die vorzugsweise durch die CPU 512 (5A) ausgeführt werden, um verschiedene Funktionen und Operationen für den TV 122 auszuführen. Die konkrete Beschaffenheit und Funktionalität der TV-Anwendung(en) 612 variiert vorzugsweise abhängig von Faktoren, wie etwa der spezifischen Art und konkreten Funktionalität des entsprechenden TV 122. Bei der Ausführungsform von 6 können die Videodaten 316 beliebige geeignete Informationen oder Daten zur Anzeige auf dem Fernseher 122 (1A) umfassen. Ähnlich können die Audiodaten 318 beliebige geeignete Informationen oder Daten zur Wiedergabe durch den Fernseher 122 (1A) umfassen.
Bei der Ausführungsform von 6 kann das Detektionsmodul 620 durch den TV 122 zum Detektieren und Finden der Metadaten 322, die wie oben besprochen in die Videodaten 316 eingebettet wurden, verwendet werden. Bei der Ausführungsform von 6 kann der TV 122 mit dem Extraktionsmodul 620 die detektierten Metadaten 322 aus den Videodaten 316 entfernen. Bei der Ausführungsform von 3 koordiniert und verwaltet das Metadaten-Modul 624 verschiedene Funktionen zum Verarbeiten der extrahierten Metadaten 322, um synchronisierte DOs 144 (1B) oder andere TV-Anwendungen gemäß der vorliegenden Offenbarung effektiv zu unterstützen. Die verschiedenen Informationen 628 können beliebige zusätzliche Informationen zur Benutzung durch den TV 122 umfassen.
Bei der Ausführungsform von 6 wird die vorliegende Offenbarung als hauptsächlich als Software implementiert offenbart und besprochen. Bei alternativen Ausführungsformen können einige oder alle der Funktionen der vorliegenden Offenbarung jedoch durch geeignete elektronische Hardwareschaltungen ausgeführt werden, die dafür ausgelegt sind, verschiedene Funktionen auszuführen, die den Funktionen der Softwaremodule, die hier besprochen werden, äquivalent sind. Zusätzliche Einzelheiten bezüglich der Funktionalität des Metadaten-Moduls 324 und der Metadaten 322 werden nachfolgend in Verbindung mit 7 und 8 weiter besprochen.
Ausführungsformen der vorliegenden Offenbarung betten die Metadaten 322 und/oder andere digitale Daten unter Verwendung von Luminanzwerten eines Videoeinzelbildes als ein Wasserzeichen ein. Die Luminanzwerte sind beschränkt im Bereich [16, 235] dezimal. Der Luminanzwert 16 entspricht schwarz, und der Luminanzwert 235 entspricht weiß, sowie es in der ITU-R-Empfehlung BT.709 definiert wird, die hiermit durch Bezugnahme vollständig aufgenommen wird. Ein Wasserzeichen-Datensymbol wird in M Pixel codiert (wobei M typischerweise 6, 8 oder 16 ist). Jedes Symbol codiert ein oder mehrere Datenbit. Wenn Codierung mit einem Bit pro Symbol verwendet wird, können Symbolwerte entweder null oder 100% sein, und zur Unterscheidung von „1“-Bit von „0“-Bit wird ein Schwellenwert von 50% Luminanz verwendet. Wenn Codierung mit zwei Bit pro Symbol verwendet wird, können Symbolwerte null, 33,33%, 66,67% oder 100% Luminanz sein, und es können Schwellenwerte von 16,67%, 50% und 83,33% verwendet werden. Als Alternative können niedrigere Werte der Luminanz verwendet werden, um die Sichtbarkeit zu verringern. Durch Auswahl von Luminanzbereichen und -werten kann ein Kompromiss zwischen Robustheit gegenüber starker Komprimierung oder Videotranscodierung gegenüber Sichtbarkeit erreicht werden.
In 12A und 12B sind Beispiele für Codierung mit einem Bit und zwei Bit pro Symbol dargestellt. In 12A verwenden die die Wasserzeichendaten repräsentierenden Symbole zwei Luminanzwerte: 0 und 60. In 12B verwenden die die Wasserzeichendaten repräsentierenden Symbole vier verschiedene gleichmäßig beabstandete Luminanzwerte: 16, 89, 162 und 235 (dezimal). Die Luminanzwerte werden bei bestimmten Ausführungsformen um 16 herunter verschoben, so dass der erste Luminanzwert 0 ist. Die Schwellenwerte zur Decodierung sind in 12A und 12B gezeigt. Zum Beispiel wird in 12A ein Symbolwert 0 detektiert, wenn die Luminanz kleiner oder gleich 30 ist. Der Wert 1 wird detektiert, wenn die Luminanz größer als 30 ist. In 12B wird ein Symbolwert 0 detektiert, wenn die Luminanz kleiner oder gleich 42 ist, der Wert 1 wird detektiert, wenn die Luminanz im Bereich 43 bis 127 liegt, der Wert 2 wird detektiert, wenn die Luminanz im Bereich 128 bis 212 liegt, und der Wert 3 wird detektiert, wenn die Luminanz 213 oder darüber ist. Obwohl in den meisten Fällen Fernseher einige oberste oder unterste Zeilen von Video nicht anzeigen, besteht ein Problem, das durch die Verwendung eines solchen Luminanzcodierungsschemas entsteht, darin, dass das eingebettete Wasserzeichen einem Zuschauer sichtbar sein kann, wenn der durch das Wasserzeichen eingenommene Teil des Videoeinzelbildes auf dem TV 122 angezeigt wird.
Um die Sichtbarkeit des Wasserzeichens zu verringern, verwenden Ausführungsformen der vorliegenden Offenbarung ein oder eine Kombination von verschiedenen Verfahren, darunter (1) Verringern der Datenkapazität des Wasserzeichens; (2) Verwenden eines Luminanzwerts unterhalb von „schwarz“; und (3) Verringern der Rate, mit der sich das Wasserzeichen ändert (z.B. einmal pro Sekunde statt pro Einzelbild).
Bei bestimmten Ausführungsformen werden Metadaten in Zeile 1 der Videodaten eingebettet. Video in Zeile 1 besteht aus N codierten Pixeln (bei HD- oder UHD-Inhalt gewöhnlich 1280, 1920 oder 3840). Wie oben erwähnt wird ein Wasserzeichen-Datensymbol in M Pixel codiert (wobei M typischerweise 6, 8 oder 16 beträgt). Ferner werden bei einer Ausführungsform dieselben Metadaten für bessere Robustheit aufgrund von Fehlern, die bei der Codierung oder Umcodierung eingeführt werden können, auch in Zeile 2 eingebettet. Aufgrund der Beschaffenheit der Videocodierung hat sich gezeigt, dass sich die Integrität von Metadaten in Zeile 1 verbessert, wenn dieselben Daten in Zeile 2 wiederholt werden.
Um die Sichtbarkeit der eingebetteten Metadaten zu verringern, kann bei einer Ausführungsform die Datenkapazität des Wasserzeichens verringert werden. Zum Beispiel können pro Zeile 60 Byte Daten codiert werden, wenn die Anzahl horizontaler Pixel pro Zeile 1920 ist, die Anzahl der Pixel pro Symbol 8 ist und die Anzahl codierter Bit pro Symbol 2 ist. Um jedoch 2 Bit pro Symbol zu codieren, muss ein größerer Bereich von Luminanzwerten verwendet werden. Um die Sichtbarkeit des Wasserzeichens zu verringern, kann die Datenkapazität des Wasserzeichens verringert werden, so dass der maximale zum Identifizieren eines Symbolwertes erforderliche Luminanzwert verringert wird, zum Beispiel vom Wert 235. Zum Beispiel könnten Luminanzwerte 16 und 89 anstelle von 16, 89, 162 und 235 zur Codierung des Wasserzeichens verwendet werden, wenn die Anzahl codierter Bit pro Symbol auf 2 verringert wird, was dazu führt, dass 30 Byte Daten pro Zeile codiert werden.
Bei einer Ausführungsform verringert die Verwendung eines Luminanzwerts unterhalb von schwarz die Sichtbarkeit des Wasserzeichens. Videostandards spezifizieren, dass Luminanzwerte im Bereich von 16 (schwarz) bis 235 (weiß) liegen, wenn sie als 8 Bit codiert werden. Ein Luminanzwert von 0 (oder ein beliebiger anderer Wert unter 16) kann Transcodierung überdauern. Verwendung eines Mindest-Luminanzwerts von 0 anstelle von 16 erlaubt eine Verringerung des zum Codieren des Wasserzeichens benötigten maximalen Luminanzwerts und höhere Robustheit. Zum Beispiel kann bei Codierung mit 2 Bit pro Symbol der Bereich 16 bis 235 auf 0 bis 219 verringert werden, und bei Codierung mit 1 Bit pro Symbol kann der Bereich 16 bis 89 auf 0 bis 73 verringert werden, ohne Verlust an Robustheit. Bei einer Ausführungsform wird der Luminanzbereich für Codierung mit 1 Bit pro Symbol auf 0 bis 42 gesetzt. Der Luminanzwert 42 ist ein Pegel von Dunkelgrau, der fast nicht wahrnehmbar ist. Es kann jedoch bei bestimmten Ausführungsformen jeder Luminanzwertbereich gesetzt werden, bei dem der Bereich bei einem Wert unter 16 beginnt. Bei bestimmten Ausführungsformen können Luminanzwerte über 235 verwendet werden, um den Bereich von zur Codierung verwendeten Luminanzwerten zu vergrößern oder den Bereich von Luminanzwerten auf höhere Werte zu verschieben.
Bei einer Ausführungsform wird die Rate, mit der sich das Wasserzeichen von Einzelbild zu Einzelbild ändert, verringert, um Sichtbarkeit des in die Videodaten 316 eingebetteten Wasserzeichens zu verringern. Zum Beispiel kann dasselbe Wasserzeichen in eine vorbestimmte Anzahl von Einzelbildern oder für eine vorbestimmte Zeitdauer (z.B. 1 Sekunde) eingebettet werden, bevor es geändert wird, statt einmal pro Einzelbild geändert zu werden. Obwohl dies die Rate, mit der Daten übertragen werden, verringert, verringert die Verkleinerung der Änderungsrate mögliche Ablenkung eines Zuschauers, die sich aus sich häufig ändernden Pixelluminanzwerten ergeben kann, wenn sich das Wasserzeichen in einem sichtbaren Bereich der Anzeige befindet.
Die Anzahl von ein Symbol repräsentierenden horizontalen Pixeln ist abhängig von der horizontalen Auflösung unterschiedlich. Bei einer Ausführungsform werden 16 Pixel pro Symbol für die 3840-Horizontalauflösung benutzt, um Bewahrung des Videowasserzeichens während Abwärtsauflösung von 4K auf 2K zu erlauben.
Nunmehr mit Bezug auf 7A und 7B sind Darstellungen digitaler Daten (z.B. Metadaten 322), die in Videodaten 316 eingebettet sind, gemäß zwei verschiedenen Ausführungsformen der vorliegenden Offenbarung gezeigt. 7A und 7B zeigen eine vordere Ansicht einer Anzeige 138 des TV 122 (1A). Die Ausführungsformen von 7A und 7B werden zur Veranschaulichung präsentiert, und bei alternativen Ausführungsformen können die Metadaten 322 unter Verwendung von Techniken und Konfigurationen zusätzlich zu oder anstelle von den in Verbindung mit den Ausführungsformen von 7A und 7B besprochenen Techniken und Konfigurationen eingebettet werden. Zum Beispiel können die digitalen Daten bei einigen Ausführungsformen unten in der Anzeige platziert werden.
Bei der Ausführungsform von 7A umfasst die Anzeige 138 eine Hauptbildschirmregion, die typischerweise die durch die Inhaltsquelle 114 (1A) bereitgestellten Videodaten 316 anzeigt. Bei der Ausführungsform von 7A umfassen die angezeigten Videodaten 316 auf der Anzeige 138 auch die digitalen Daten, die sich in einem unauffälligen Bereich der Anzeige 138 befinden. Bei verschiedenen anderen Ausführungsformen können die digitalen Daten in einer beliebigen gewünschten Form oder Größe implementiert werden und können an einem beliebigen geeigneten Ort bzw. beliebigen geeigneten Orten auf der Anzeige 138 angezeigt werden. Zur Veranschaulichung sind die Metadaten 322 in 7A als eine dünne gestrichelte Linie abgebildet. Es wird jedoch jede beliebige effektive Konfiguration oder jedes beliebige effektive Erscheinungsbild gleichermaßen zur Implementierung der Metadaten 322 in Betracht gezogen.
Bei der Ausführungsform von 7A können die digitalen Daten so codiert werden, dass sie die erforderlichen Informationen (siehe 4) auf eine beliebige effektive Weise repräsentieren. Zum Beispiel können die digitalen Daten bei bestimmten Ausführungsformen als eine oder mehrere horizontale Zeilen von digitalen Videoinformationen formatiert werden, die in der Region der Vertikal-Austastlücke (VBI) des Videosignals oder in der Nähe davon positioniert werden. Da Digitalfernsehen oft mit 1280 bis 1920 horizontalen Pixeln pro Abtastzeile codiert wird, kann die VBI-Konfiguration von 7A für die Metadaten 322 dem TV 122 eine beträchtliche Menge digitaler Informationen bereitstellen.
Die vorliegende Offenbarung unterstützt somit ein Verfahren zum Tarnen der digitalen Daten in den Videodaten 316 dergestalt, dass ein Teil von aktivem Video (der dem Zuschauer potentiell sichtbar ist) zum Übermitteln der digitalen Daten verwendet wird. Außerdem umfasst die vorliegende Offenbarung Standardisierung eines Codierungsformats für die digitalen Daten, um Videokomprimierung und -dekomprimierung zu überdauern. Die vorliegende Offenbarung unterstützt ferner Einbettung der digitalen Daten in das Videobild dergestalt, dass die digitalen Daten auf standardisierte Weise wiedergewonnen (detektiert, extrahiert und durch den TV 122 verarbeitet) werden können, ohne übermäßiges CPU-Overhead. Die Implementierung und Benutzung der digitalen Daten werden nachfolgend in Verbindung mit 8A–8C und 9–11 weiter besprochen.
Bei der Ausführungsform von 7B umfasst die Anzeige 138 eine Hauptbildschirmregion, die typischerweise die durch die Inhaltsquelle 114 (1A) bereitgestellten Videodaten 316 anzeigt. Bei der Ausführungsform von 7B umfassen die angezeigten Videodaten 316 auf der Anzeige 138 auch die eingebetteten digitalen Daten (z.B. Metadaten 322), die sich vorzugsweise in einem unauffälligen Bereich der Anzeige 138 befinden. Zum Beispiel können sich die digitalen Daten in einer beliebigen Region der Anzeige befinden, die außerhalb des Anzeigebereichs des Video liegt (z.B. ein Spielfilm, der in einem anderen Seitenverhältnis angezeigt wird). Bei verschiedenen anderen Ausführungsformen können die digitalen Daten in beliebiger Form oder Größe implementiert und an einem beliebigen geeigneten Ort bzw. beliebigen geeigneten Orten auf der Anzeige 138 angezeigt werden. Zur Veranschaulichung sind die digitalen Daten in 7B als ein kleines gestricheltes Rechteck abgebildet. Es wird jedoch jede beliebige effektive Konfiguration oder jedes beliebige effektive Erscheinungsbild gleichermaßen zur Implementierung der eingebetteten digitalen Daten in Betracht gezogen.
Bei der Ausführungsform von 7B können die digitalen Daten so codiert werden, dass sie die erforderlichen Informationen (siehe 4) auf eine beliebige effektive Weise repräsentieren. Zum Beispiel können bei bestimmten Ausführungsformen die digitalen Daten durch Benutzung herkömmlicher oder erweiterter Strichcodetechnologien formatiert werden. Anders ausgedrückt könnten die digitalen Daten effektiv als ein zweidimensionaler Video-Strichcode formatiert werden, der in einer Ecke oder am Rand der angezeigten Videodaten 316 eingebettet wird. Außerdem könnte der Strichcode oder andere Formatierung der digitalen Daten als Teil eines kleinen grafischen Logosymbols, das als „Bug“ bekannt ist, angezeigt werden. Weiterhin könnten bei verschiedenen anderen Ausführungsformen die digitalen Daten durch Benutzung beliebiger anderer effektiver Techniken codiert oder angezeigt werden. Eine solche Codierung der Metadaten 322 könnte eine beträchtliche Informationsmenge repräsentieren und könnte relativ klein und dicht sein, da die Metadaten 322 durch den die Videodaten 316 verarbeitenden TV 122 in Videospeicher gelesen würden. Wenn gedruckte Strichcodes für Auslesung durch Laserscanner optimiert werden, wird die Art von für die Metadaten 322 verwendetem Videostrichcode in ein digitales Videosignal eingebettet, das direkt (als Pixelluminanz- oder -chrominanzabtastwerte) durch den TV 122 verarbeitet wird.
Bei bestimmten Ausführungsformen könnten Quantisierungsfehler bei der Videokomprimierung möglicherweise einen Videostrichcode verdecken (so dass ein Strichcode, der in einer sich schnell bewegenden und schwer zu komprimierenden Videosequenz auftritt, nicht überdauern könnte). Wenn der Strichcode jedoch für einige Zeit (einige wenige Sekunden) auf dem Bildschirm gelassen wird, mindert sich dieses Problem. Das resultierende Strichcodebild muss nicht unbedingt mit hohem Kontrast (schwarze Zeilen auf weißem Hintergrund) gezeigt werden, da der TV 122 in der Lage sein wird, die Informationen über einen Filterungsmechanismus zu extrahieren. Der Strichcode könnte somit mit verschiedenen Grauschattierungen codiert werden (solange es genug Kontrast für zuverlässige Extraktion gibt). Zum Beispiel könnte der Strichcode unter Verwendung eines Luminanzwerts unter 16 unter Verwendung von Codierung mit 1 Bit pro Symbol und/oder verringerten Änderungsraten wie oben beschrieben angezeigt werden.
Wie oben besprochen könnten die digitalen Daten in Verbindung mit einem grafischen Logosymbol („Bug“), als Einblendung oder Grenze angezeigt werden oder könnten an einem oder mehreren der äußeren Ränder des Bildes platziert werden (da diese gewöhnlich vor der Anzeige abgeschnitten werden und auf jeden Fall weniger auffällig sind). Die Bit der digitalen Daten könnten räumlich über den Bereich des Videoeinzelbildes verteilt werden, wenn das Muster ihres Orts dem TV 122 im Voraus bekannt wäre. Selbst eine kleine Menge der digitalen Daten, wie etwa die Inhalts-ID-Daten 420 oder die Zeigerdaten 422 von 4, können beim Verbessern des Benutzererlebnisses von großer Hilfe sein, da diese Informationen über eine Interaktion mit einem Webserver 130 (siehe 1A) erweitert werden können, um zusätzliche erforderliche Informationen zu erhalten, darunter, aber ohne Beschränkung darauf, die Metadaten 322 oder Inhaltsdaten.
Nunmehr mit Bezug auf 8A–8C ist ein Flussdiagramm von Verfahrensschritten zum Verteilen der Metadaten 322 und/oder anderen digitalen Daten, die in die Videodaten 316 eingebettet sind, gemäß einer Ausführungsform der vorliegenden Offenbarung gezeigt. Das Beispiel von 8 wird zur Veranschaulichung präsentiert, und bei alternativen Ausführungsformen kann die vorliegende Offenbarung andere Schritte und Sequenzen als bestimmte der in Verbindung mit der Ausführungsform von 8 besprochenen Schritte und Sequenzen benutzen.
Bei der Ausführungsform von 8A produziert in Schritt 812 die Inhaltsquelle 114 oder andere geeignete Entität anfänglich A/V-Inhaltsdaten, die typischerweise die Videodaten 316 und die Audiodaten 318 umfassen. In Schritt 814 erzeugt die Inhaltsquelle 114 oder andere geeignete Entität dann die Metadaten 322 zur Unterstützung verschiedener erweiterter interaktiver Merkmale auf dem Fernsehgerät 122, wie etwa Anzeige eines oder mehrerer synchronisierter DOs 144. In Schritt 816 fügt die Inhaltsquelle 114 oder andere geeignete Entität die Metadaten 322 in die Videodaten 316 ein.
In Schritt 818 komprimiert die Inhaltsquelle 114 oder andere geeignete Entität die Audiodaten 318 und die Videodaten 316 (einschließlich der eingebetteten Metadaten 322), um einen komprimierten Verteilungsmultiplex zu erzeugen. Der Prozess von 8A schreitet dann mittels des Verbindungsbuchstabens „A“ zu Schritt 822 von 8B.
In Schritt 822 von 8B empfängt und demultiplext eine Empfangsvorrichtung 550 den durch die Inhaltsquelle 114 verteilten Verteilungsmultiplex, um komprimierte Audiodaten und Videodaten zu produzieren. In Schritt 824 dekomprimiert eine Decodierervorrichtung der Empfangsvorrichtung 550 dann die komprimierten Audiodaten und Videodaten, um unkomprimierte Audiodaten 318 und unkomprimierte Videodaten 316 (einschließlich der eingebetteten Metadaten 322) zu produzieren. In Schritt 826 formatiert die Empfangsvorrichtung 550 die Audiodaten 318 und die Videodaten 316 für Ablieferung an die Anzeige 138 des Fernsehers 122. Der Prozess von 8B schreitet dann mittels des Verbindungsbuchstabens „B“ zu Schritt 828 von 8C.
In Schritt 828 von 8C empfängt der Fernseher 122 oder die andere geeignete Entität die unkomprimierten Audiodaten 318 und unkomprimierten Videodaten 316 (einschließlich der eingebetteten Metadaten 322) oder verarbeitet sie weiter. In Schritt 830 scannt das Detektionsmodul 620 des Fernsehers 122 die Videodaten 316, um die eingebetteten Metadaten 322 zu detektieren, durch Benutzung beliebiger effektiver Techniken (z.B. durch Detektieren der Anwesenheit des Einlaufmusters).
In Schritt 832 extrahiert das Extraktionsmodul 622 des Fernsehers 122 die gefundenen Metadaten 322 aus den Videodaten 316. Bei einer Ausführungsform bestimmt der Fernseher 122 Symbolwerte des Wasserzeichens, wodurch die eingebetteten Metadaten repräsentiert werden, auf der Basis der Luminanzwerte in Pixeln eines ersten Teils (z.B. einer ersten Zeile) eines Videoeinzelbildes des Inhalts. Wenn zum Beispiel acht Pixel ein Symbol bilden, mittelt der Fernseher 122 die Luminanzwerte in den das Symbol bildenden acht Pixeln und bestimmt auf der Basis von Luminanzschwellendecodierungswerten, ob das Symbol eine „1“ oder „0“ ist. Zum Beispiel bestimmt der Fernseher 122 bei Codierung mit 1 Bit pro Symbol, dass das Symbol „0“ ist, wenn die detektierte mittlere Luminanz kleiner oder gleich einem vorbestimmten Prozentsatz (z.B. 50%) eines Codierungsbereichs ist, und das Symbol „1“ ist, wenn die detektierte mittlere Luminanz größer als der vorbestimmte Prozentsatz des Codierungsbereichs ist.
Als Letztes verarbeitet in Schritt 834 das Metadatenmodul 624 die extrahierten Metadaten 322, um geeignete erweiterte Merkmale, wie etwa Anzeigen eines oder mehrerer synchronisierter DOs 144 auf der Anzeige 138 des Fernsehers 122, erfolgreich zu unterstützen. Der Prozess von 8C kann dann enden.
Mit Bezug auf die erweiterten Merkmale. Bei einer Ausführungsform könnte der Fernseher 122 einen Kanalwechsel (oder Wechsel von Inhalt) entweder durch Detektieren, dass der Inhalt nicht mehr markiert ist (z.B. kein Wasserzeichen mehr detektiert), oder durch Detektieren eines Einzelbildes markierten Inhalts (z.B. eines Wasserzeichens), worin der EIDR-Wert geändert ist, erkennen. Bei einer Ausführungsform wird die Inhalts-ID direkt durch den EIDR-Wert in der Inhalts-ID-Nachricht identifiziert. Bei einer anderen Ausführungsform wird ein URL eines entfernten Servers oder beliebige andere Information über den Inhalt als als das Wasserzeichen eingebettete Metadaten bereitgestellt. Bei einer anderen Ausführungsform werden zwei Datenelemente in die eingebetteten Metadaten aufgenommen, um die Medienzeit zu identifizieren – die Medienzeit in ganzen Sekunden wird in der Inhalts-ID-Nachricht spezifiziert, während die Medienzeit in Einzelbildern in der Einzelbild-Zählnachricht spezifiziert wird, so dass Timinggenauigkeit auf Einzelbildebene ist. Ferner kann man mit den eingebetteten Metadaten in Echtzeit Ereignistrigger bereitstellen, die zeitempfindlich sind.
Bei bestimmten alternativen Ausführungsformen können die Metadaten 322 ähnlich durch eine beliebige andere geeignete Entität an einem beliebigen Punkt auf dem Verteilungspfad erzeugt und in die Videodaten 316 eingefügt werden. Bei bestimmten dieser alternativen Ausführungsformen können die Metadaten 322 ohne vollständiges Dekomprimieren der Videodaten 316 eingefügt werden. Zum Beispiel könnten einzelne Makroblöcke komprimierter Videodaten 316 (ohne jegliche Metadaten 322) durch entsprechende komprimierte Makroblöcke, die die Metadaten 322 bereits eingebettet enthalten, ersetzt werden. Aus allen obigen Gründen stellt die vorliegende Offenbarung somit ein verbessertes System und Verfahren zum Verteilen von in Videodaten eingebetteten Metadaten bereit.
9 und 10 zeigen Flussdiagramme von beispielhaften Verfahrensschritten zum Wiedergewinnen der in die Videodaten 316 eingebetteten digitalen Daten. 10 zeigt eine Ausführungsform, bei der ein zum Codieren mehrerer Symbole in einem Bild (z.B. einem Videoeinzelbild) verwendeter Luminanzwert durch die Empfangsvorrichtung 550 berechnet wird. 10 zeigt eine Ausführungsform, bei der der zum Codieren der mehreren Symbole in dem Bild verwendete Luminanzwert oder ein beliebiger anderer Parameter bzw. beliebige andere Parameter (z.B. zusätzliche zur Codierung verwendete Luminanzwerte, ein oder mehrere Slice-Punkte usw.) in das Bild codiert werden.
Angesichts der Tatsache, dass die Empfangsvorrichtung 550 nicht genau im Voraus wissen kann, wie die Luminanzdaten zum Extrahieren der digitalen Daten zu „slicen“ sind, zeigt 9 eine Ausführungsform, bei der ein Algorithmus zum optimalen Setzen eines oder mehrerer Slice-Punkte verwendet wird. Der Algorithmus ist Datenwiedergewinnungsschaltungen in allgemeinem Gebrauch mit analogen Kommunikationssystemen analog. Bei einer Ausführungsform wird der optimale Slice-Punkt für 2-Pegel-PAM-Codierung durch Suchen nach dem Ort der Spitze in einer Kurve der Häufigkeit verschiedener Luminanzwerte und Dividieren dieser Zahl durch 2 bestimmt.
13 zeigt eine beispielhafte Analyse von Wasserzeichensymbolen (z.B. mehrerer in einem Bild codierter Symbole). Der Graph wurde durch Analysieren von Wasserzeichen erstellt, die durch einen Prozess der Videocodierung/-decodierung verschlechtert wurden. Insgesamt wurden 36966 Einzelbilder Video analysiert. Die zwei zur Codierung von Symbolen verwendeten Pegel waren die Luminanzwerte 0 und 42 (in einem 8-Bit-Luminanzabtastwert). Auf der Y-Achse zeigt der Graph den Prozentsatz von Symbolen, die (im Mittel) als ein bestimmter Wert der Luminanz, gegeben in der X-Achse, gefunden wurden. Zum Beispiel hatten ungefähr 7% aller Symbole den Luminanzwert 42 (das nominale, Spitze). Nahezu null hatten den Wert 21 (genau zwischen den zwei ursprünglich codierten Luminanzwerten).
Wie in 9 dargestellt, empfängt die Empfangsvorrichtung 550 ein Bild, in dem mehrere Symbole codiert sein können, im Schritt 902 bzw. ruft dieses ab. Das Bild kann ein in einem empfangenen Digitalfernsehsignal, aufgezeichnetem Audio-/Videoinhalt oder einer beliebigen anderen Video- oder Bildquelle enthaltenes Videoeinzelbild sein.
In Schritt 904 prüft die Empfangsvorrichtung 550, ob das Bild mehrere darin codierte Symbole umfasst. Wenn bestimmt wird, dass das Bild die mehreren Symbole nicht enthält, endet der Prozess. Die Empfangsvorrichtung 550 bestimmt, ob das Bild ein vorbestimmtes Einlaufmuster umfasst, bevor zu Schritt 906 geschritten wird. Das Einlaufmuster besteht aus einer festen Anzahl von Symbolen, die vorbestimmte Werte enthalten. Ein beispielhafter Prozess zur Durchführung dieser Bestimmung wird nachfolgend mit Bezug auf 11 ausführlicher beschrieben.
In Schritt 906 bestimmt die Empfangsvorrichtung 550 eine Menge von zur Codierung der Symbole verwendeten Luminanzwerten auf der Basis von Luminanzwerten mehrerer in dem Bild enthaltender Pixel. Wenn zum Beispiel ein Symbol unter Verwendung mehrerer Pixel (z.B. 8) codiert wird, können die Luminanzwerte aller oder einer Teilmenge der mehreren zur Codierung des Symbols verwendeten Pixel gemittelt werden, um einen diesem Symbol entsprechenden mittleren Luminanzwert zu erzeugen. In diesem Fall kann die erste Menge von Luminanzwerten die mittleren Luminanzwerte umfassen, die den Symbolen entsprechen.
Im Schritt 908 bestimmt die Empfangsvorrichtung 550 einen höchsten zum Codieren der Symbole in dem Bild verwendeten Luminanzwert auf der Basis der bestimmten Menge von Luminanzwerten. Bei einer Ausführungsform bestimmt die Empfangsvorrichtung 550 den höchsten zum Codieren der Symbole verwendeten Luminanzwert auf der Basis einer Anzahl von Vorkommnissen jedes Luminanzwerts in einem vorbestimmten Bereich von Luminanzwerten. Der höchste Luminanzwert ist der Luminanzwert in dem vorbestimmten Bereich von Luminanzwerten, der die höchste Anzahl von Vorkommnissen aufweist. Zum Beispiel identifiziert mit Bezug auf 13 die Empfangsvorrichtung 550 eine Spitze in den Vorkommnissen der verschiedenen Luminanzwerte. Beispielhaftes JavaScript zum Bestimmen des höchsten Luminanzwerts ist in 14A–14C dargestellt. Bei einer Ausführungsform identifiziert die Empfangsvorrichtung 550, wenn mehr als ein Bit pro Symbol codiert ist, mehrere verschiedene Spitzen, um zu identifizieren, welche Luminanzwerte zum Codieren der verschiedenen Symbolwerte verwendet werden. Bei einer anderen Ausführungsform werden die zur Codierung der verschiedenen Symbolwerte verwendeten Luminanzwerte auf der Basis des bestimmten höchsten Luminanzwerts berechnet.
In Schritt 910 leitet die Empfangsvorrichtung 550 die Datenwerte der in dem Bild codierten Symbole auf der Basis der Menge von Luminanzwerten und des bestimmten höchsten Luminanzwerts ab. Der bestimmte höchste Luminanzwert wird zur Bestimmung eines Slice-Punkts verwendet. Die Luminanzwerte in der Menge von Luminanzwerten können mit dem Slice-Punkt verglichen werden, um die Werte der in dem Bild codierten Symbole abzuleiten.
Bei einer Ausführungsform wird, wenn 1 Bit pro Symbol codiert wird und der niedrigste zum Codieren eines Symbols verwendete Luminanzwert 0 ist, der bestimmte höchste Luminanzwert durch eine vorbestimmte Zahl (z.B. 2) dividiert, um einen Slice-Punkt zu bestimmen. Wenn der niedrigste zum Codieren eines Symbols verwendete Luminanzwert jedoch nicht 0 ist, kann der Slice-Punkt unter Verwendung der folgenden Formel berechnet werden: niedrigster Luminanzwert + (höchster Luminanzwert – niedrigster Luminanzwert)/2. Wenn der bestimmte Slice-Punkt keine ganze Zahl ist, wird er bei einer Ausführungsform auf die nächste ganze Zahl gerundet. Danach wird jeder der Luminanzwerte in der Menge von Luminanzwerten mit dem Slice-Punkt verglichen, um die Symboldatenwerte abzuleiten. Wenn zum Beispiel ein Bit pro Symbol codiert wird und der Luminanzwert in der Menge von Luminanzwerten entsprechend einem Symbol kleiner oder gleich dem Splice-Punkt ist, wird der Wert für dieses Symbol als 0 bestimmt. Wenn ferner der Luminanzwert in der ersten Menge von Luminanzwerten größer als der Splice-Punkt ist, wird der Wert für dieses Symbol als 1 bestimmt.
Bei einer anderen Ausführungsform wird, wenn 2 Bit pro Symbol codiert werden, der bestimmte höchste Luminanzwert zum Bestimmen von drei Splice-Punkten verwendet, die mit der ersten Menge von Luminanzwerten verglichen werden, um die Symbolwerte abzuleiten. Wenn zum Beispiel der bestimmte höchste Luminanzwert N ist und die vier Luminanzwerte, die zum Codieren der Symbole verwendet werden, 0, N/3, 2N/3 und N sind, kann ein erster Splice-Punkt durch N/6, ein zweiter Splice-Punkt durch N/2 und ein dritter Splice-Punkt durch 5N/6 bestimmt werden. Etwaige nichtganzzahlige Splice-Punkte werden bei einer Ausführungsform auf die nächste ganze Zahl gerundet. Danach wird jeder der Luminanzwerte in der Menge von Luminanzwerten mit mindestens einem des ersten, zweiten oder dritten Splice-Punkts verglichen, um die Symboldatenwerte abzuleiten.
Wenn der Luminanzwert in der Menge von Luminanzwerten entsprechend einem Symbol kleiner oder gleich dem ersten Splice-Punkt ist, wird bei einer Ausführungsform der Wert für dieses Symbol als ein erstes von 0, 1, 2 oder 3 (z.B. 0) bestimmt. Wenn der Luminanzwert in der Menge von Luminanzwerten entsprechend einem Symbol größer als der erste Splice-Punkt, aber kleiner oder gleich dem zweiten Splice-Punkt ist, wird der Wert für dieses Symbol als ein zweites von 0, 1, 2 oder 3 (z.B. 1) bestimmt. Wenn der Luminanzwert in der Menge von Luminanzwerten entsprechend einem Symbol größer als der zweite Splice-Punkt, aber kleiner oder gleich dem dritten Splice-Punkt ist, wird der Wert für dieses Symbol als ein drittes von 0, 1, 2 oder 3 (z.B. 2) bestimmt. Wenn der Luminanzwert in der Menge von Luminanzwerten größer als der dritte Splice-Punkt ist, wird der Wert für dieses Symbol als ein viertes von 0, 1, 2 oder 3 (z.B. 3) bestimmt.
10 zeigt eine Ausführungsform, bei der ein zum Codieren von Symbolen in einem Bild verwendeter Luminanzwert und/oder ein anderer Parameter (z.B. ein oder mehrere Slice-Punkte, mehrere zur Codierung von Symbolen verwendete Luminanzwerte usw.) in dem Bild codiert wird. In Schritt 1002 empfängt die Empfangsvorrichtung 550 ein Bild, in dem mehrere Symbole codiert sein können, oder ruft dieses ab. Das Bild kann ein Videoeinzelbild sein, das in einem empfangenen Digitalfernsehsignal, aufgezeichnetem Audio-/Videoinhalt oder einer beliebigen anderen Video- oder Bildquelle enthalten ist.
In Schritt 1004 prüft die Empfangsvorrichtung 550, ob das Bild mehrere darin codierte Symbole umfasst. Wenn bestimmt wird, dass das Bild die mehreren Symbole nicht enthält, endet der Prozess. Bei einer Ausführungsform bestimmt die Empfangsvorrichtung 550, ob das Bild ein vorbestimmtes Einlaufmuster umfasst, bevor zu Schritt 1006 geschritten wird. Wie oben beschrieben, besteht das Einlaufmuster aus einer festen Anzahl von Symbolen, die vorbestimmte Werte enthalten. Ein beispielhafter Prozess zur Durchführung dieser Bestimmung wird nachfolgend mit Bezug auf 11 ausführlicher beschrieben.
In Schritt 1006 bestimmt die Empfangsvorrichtung 550 eine erste Menge von zur Codierung einer ersten Teilmenge der Symbole verwendeten Luminanzwerten auf der Basis von Luminanzwerten einer ersten Vielzahl von in dem Bild enthaltenen Pixeln. Die erste Vielzahl von Pixeln befindet sich in einer vorbestimmten Region des Bildes. Bei einer Ausführungsform entspricht die erste Vielzahl von Pixeln vorbestimmten Pixeln in den Zeilen 1 und/oder 2 eines Videoeinzelbildes. Wenn zum Beispiel die in dem Bild codierten Symbole das vorbestimmte Einlaufmuster enthalten, entspricht das vorbestimmte Einlaufmuster einer anfänglichen Vielzahl von Pixeln in den Zeilen 1 und/oder 2, und die erste Vielzahl von Pixeln entspricht den Pixeln, die der anfänglichen Vielzahl von Pixeln in den Zeilen 1 und/oder 2 unmittelbar folgen.
Wenn ein Symbol unter Verwendung mehrerer Pixel (z.B. 8) codiert wird, können die Luminanzwerte aller oder einer Teilmenge der mehreren zum Codieren des Symbols verwendeten Pixel gemittelt werden, um einen mittleren Luminanzwert entsprechend diesem Symbol zu erzeugen. In diesem Fall umfasst die erste Menge von Luminanzwerten die mittleren Luminanzwerte entsprechend der ersten Teilmenge der Symbole.
In Schritt 1008 leitet die Empfangsvorrichtung 550 Datenwerte der ersten Teilmenge der in dem Bild codierten Symbole auf der Basis eines ersten vorbestimmten Slice-Punkts (z.B. des Luminanzwerts 15) ab. Zum Beispiel vergleicht die Empfangsvorrichtung 550 die erste Menge von Luminanzwerten mit dem ersten vorbestimmten Slice-Punkt. Wenn ein Luminanzwert in der ersten Menge von Luminanzwerten kleiner oder gleich dem ersten vorbestimmten Slice-Punkt ist, wird ein Wert des Symbols entsprechend diesem Luminanzwert als 0 bestimmt. Wenn der Luminanzwert in der ersten Menge von Luminanzwerten größer als der erste vorbestimmte Slice-Punkt ist, wird der Wert des Symbols entsprechend diesem Luminanzwert als 1 bestimmt.
In Schritt 1010 bestimmt die Empfangsvorrichtung 550 einen zum Codieren einer zweiten Teilmenge von Symbolen in dem Bild verwendeten Luminanzwert auf der Basis der abgeleiteten Datenwerte der ersten Teilmenge der Symbole. Bei anderen Ausführungsformen bestimmt die Empfangsvorrichtung 550 einen oder mehrere Slice-Punkte, mehrere zum Codieren von Symbolen verwendete Luminanzwerte wieder auf der Basis der abgeleiteten Werte der ersten Teilmenge der Symbole usw. Zum Beispiel definieren die abgeleiteten Datenwerte der ersten Teilmenge der Symbole den oberen Luminanzwert, der verwendet wird, wenn 1 Bit pro Symbol codiert wird, falls der untere Luminanzwert vorbestimmt ist (z.B. wie durch einen Standard spezifiziert). Bei einer anderen Ausführungsform definieren die abgeleiteten Datenwerte der ersten Teilmenge der Symbole den einen oder die mehreren Splice-Punkte und/oder die mehreren zur Codierung von Symbolen verwendeten Luminanzwerte zur Verwendung zum Ableiten von Werten einer zweiten Teilmenge der Symbole. Zum Beispiel kann der zum Bestimmen von Symboldatenwerten verwendete Splice-Punkt anstelle des oberen Luminanzwerts identifiziert werden. Bei einer anderen Ausführungsform können, wenn 2 Bit pro Symbol codiert werden, drei zum Codieren von Symboldatenwerten verwendete Luminanzwerte oder entsprechende Slice-Punkte durch die abgeleiteten Datenwerte der ersten Teilmenge der Symbole identifiziert werden.
In Schritt S1012 bestimmt die Empfangsvorrichtung 550 eine zweite zum Codieren der zweiten Teilmenge der Symbole verwendete Menge von Luminanzwerten auf der Basis von Luminanzwerten einer zweiten Vielzahl von in dem Bild enthaltenen Pixeln. Die zweite Vielzahl von Pixeln befindet sich in einer vorbestimmten Region des Bildes. Bei einer Ausführungsform grenzt die zweite Vielzahl von Pixeln an die erste Vielzahl von Pixeln an (folgt dieser z.B. unmittelbar). Wenn ein Symbol unter Verwendung mehrerer Pixel (z.B. 8) codiert wird, können die Luminanzwerte aller oder einer Teilmenge der mehreren zum Codieren des Symbols verwendeten Pixel gemittelt werden, um einen mittleren Luminanzwert entsprechend diesem Symbol zu erzeugen. In diesem Fall umfasst die zweite Menge von Luminanzwerten die mittleren Luminanzwerte entsprechend den Symbolen.
In Schritt S1014 leitet die Empfangsvorrichtung 550 Datenwerte der zweiten Teilmenge der in dem Bild codierten Symbole auf der Basis der zweiten Menge von Luminanzwerten und unter Verwendung des in Schritt 1010 bestimmten höchsten Luminanzwerts ab. Die Werte der zweiten Teilmenge der Symbole können zum Beispiel auf ähnliche Weise wie in Schritt 1008, wie oben beschrieben, abgeleitet werden. Bei einer anderen Ausführungsform werden die Datenwerte der zweiten Teilmenge der Symbole durch Vergleichen der zweiten Menge von Luminanzwerten mit mindestens einem des einen oder der mehreren durch die erste Teilmenge der Symbole definierten Splice-Punkte abgeleitet. Es wird angemerkt, dass der eine oder die mehreren Splice-Punkte, die zum Ableiten der Datenwerte der zweiten Teilmenge der Symbole verwendet werden, den ersten vorbestimmten Splice-Punkt umfassen können oder nicht. Ferner wird angemerkt, dass die Anzahl der pro Symbol codierten Bit zwischen der ersten und zweiten Teilmenge der Symbole abhängig von der Ausführungsform dieselbe sein kann oder nicht.
11 zeigt ein Verfahren zum Bestimmen, ob ein Bild, das zum Beispiel in Schritt 902 oder 1002 empfangen oder abgerufen wird, mehrere Symbole (z.B. digitale Daten) darin codiert umfasst. Die Empfangsvorrichtung 550 bestimmt gemäß bestimmten Ausführungsformen, ob ein vorbestimmtes Einlaufmuster (z.B. ein vorbestimmtes festes Muster von Symboldatenwerten) in dem Bild codiert ist. Die Anwesenheit des vorbestimmten Einlaufmusters zeigt in bestimmten Ausführungsformen an, dass das Bild die mehreren darin codierten Symbole umfasst.
Wie in 11 dargestellt, verarbeitet die Empfangsvorrichtung 550 in Schritt 1102 das Bild und bestimmt eine Menge von Luminanzwerten, die zur Codierung mehrerer Symbole verwendet werden, auf der Basis mehrerer in einem Bild enthaltener Pixel.
In Schritt 1102 bestimmt die Empfangsvorrichtung 550 eine Menge von Luminanzwerten einer vorbestimmten Vielzahl von Pixeln, die in dem Bild enthalten sind, worin das Einlaufmuster typischerweise codiert würde. Die vorbestimmte Vielzahl von Pixeln befindet sich in einer vorbestimmten Region des Bildes, wie etwa einer ersten vorbestimmten Anzahl von Pixeln in den Zeilen 1 und/oder 2 eines Videoeinzelbildes. Wenn ein Symbol unter Verwendung mehrerer Pixel (z.B. 8) codiert wird, können die Luminanzwerte aller oder einer Teilmenge der mehreren zum Codieren des Symbols verwendeten Pixel gemittelt werden, um einen mittleren Luminanzwert entsprechend diesem Symbol zu erzeugen. In diesem Fall umfasst die erste Menge von Luminanzwerten die mittleren Luminanzwerte entsprechend den Symbolen. Es können andere Algorithmen verwendet werden, um den Luminanzwert des Symbols, sowie es ursprünglich codiert wurde, zu bestimmen. Zum Beispiel können der höchste und niedrigste Luminanzwert der Vielzahl von Pixeln verworfen werden, bevor die Mittelung durchgeführt wird. Diese Verfahren sind dafür ausgelegt, durch den Videokomprimierungsprozess eingeführte Luminanzfehler zu berücksichtigen.
In Schritt 1104 leitet die Empfangsvorrichtung 550 Datenwerte der mehreren in dem Bild codierten Symbole auf der Basis eines vorbestimmten Slice-Punkts (z.B. des Luminanzwerts 15) ab. Der vorbestimmte Slice-Punkt kann derselbe wie der in Schritt 1000 verwendete erste vorbestimmte Slice-Punkt sein oder nicht. Zum Beispiel vergleicht die Empfangsvorrichtung 550 bei Zweipegelcodierung (d.h. 1 Bit pro Symbol) die Menge von Luminanzwerten mit dem vorbestimmten Slice-Punkt. Wenn der Luminanzwert in der Menge von Luminanzwerten kleiner oder gleich dem vorbestimmten Slice-Punkt ist, wird ein Datenwert des Symbols entsprechend diesem Luminanzwert als 1 bestimmt. Wenn der Luminanzwert in der Menge von Luminanzwerten größer als der vorbestimmte Slice-Punkt ist, wird der Datenwert des Symbols entsprechend diesem Luminanzwert als 1 bestimmt.
In einem anderen Beispiel vergleicht die Empfangsvorrichtung 550 bei Vierpegelcodierung (d.h. 2 Bit pro Symbol) die Menge von Luminanzwerten mit drei verschiedenen Slice-Punkten. Bei einer Ausführungsform wird, wenn der Luminanzwert in der Menge von Luminanzwerten entsprechend einem Symbol kleiner oder gleich dem ersten Splice-Punkt ist, der Wert für dieses Symbol als ein erstes von 0, 1, 2 oder 3 (z.B. 0) bestimmt. Wenn der Luminanzwert in der Menge von Luminanzwerten entsprechend einem Symbol größer als der erste Splice-Punkt, aber kleiner oder gleich dem zweiten Splice-Punkt ist, wird der Wert für dieses Symbol als ein zweites von 0, 1, 2 oder 3 (z.B. 1) bestimmt. Wenn der Luminanzwert in der Menge von Luminanzwerten entsprechend einem Symbol größer als der zweite Splice-Punkt, aber kleiner oder gleich dem dritten Splice-Punkt ist, wird der Wert für dieses Symbol als ein drittes von 0, 1, 2 oder 3 (z.B. 2) bestimmt. Wenn der Luminanzwert in der Menge von Luminanzwerten größer als der dritte Splice-Punkt ist, wird der Wert für dieses Symbol als ein viertes von 0, 1, 2 oder 3 (z.B. 3) bestimmt.
In Schritt 1106 bestimmt die Empfangsvorrichtung 550, ob die abgeleiteten Datenwerte der Vielzahl von Symbolen mit dem vorbestimmten Einlaufmuster (z.B. einem vorbestimmten festen Muster von Symboldatenwerten) übereinstimmen. Wenn die Empfangsvorrichtung 550 bestimmt, dass die abgeleiteten Werte der mehreren Symbole nicht mit dem vorbestimmten Einlaufmuster übereinstimmen, wartet die Empfangsvorrichtung 550 in Schritt S1110 auf das nächste Bild. Zum Beispiel kehrt der Prozess zu Schritt 902 oder 1002 zurück.
Bei einer anderen Ausführungsform vergleicht die Empfangsvorrichtung 550 die abgeleiteten Werte der mehreren Symbole mit mehreren verschiedenen vorbestimmten Einlaufmustern, wobei die Empfangsvorrichtung 550 in diesem Fall versuchen kann, das in 9 oder 10 dargestellte Verfahren abhängig davon auszuführen, mit welchem vorbestimmten Einlaufmuster Übereinstimmung besteht. Zum Beispiel könnte, ob der Modulationsgrad in den Daten just nach dem Einlaufmuster codiert ist oder nicht, dadurch bekannt sein, welches Einlaufmuster gefunden wird.
Wenn die Empfangsvorrichtung 550 bestimmt, dass die abgeleiteten Werte der mehreren Symbole mit dem vorbestimmten Einlaufmuster übereinstimmen, schreitet die Empfangsvorrichtung 550 zu Schritt 1108, und der Prozess schreitet an diesem Zeitpunkt zu Schritt 906 oder 1006. Bei einer Ausführungsform wird abhängig davon, mit welchen von mehreren vorbestimmten Einlaufmustern Übereinstimmung besteht, bestimmt, ob zu Schritt 906 oder 1006 geschritten wird.
Bei bestimmten Ausführungsformen des Systems mit 1 Bit pro Symbol können die für den „1“-Wert zu verwendenden Luminanzwerte auf eine vorbestimmte Menge von Werten, wie etwa Vielfache von 10 in einem Bereich (zum Beispiel dem Bereich von einschließlich 40 bis 100) beschränkt werden. Wenn der für den „0“-Wert zu verwendende Luminanzwert 0 ist, würde die Empfangsvorrichtung 550 somit Slice-Punkte von entweder 20, 25, 30, 35, 40, 45 oder 50, je nachdem wie es geeignet ist, verwenden. Wenn ein anderer Luminanzwert als 0 für den „0“-Wert verwendet wird, würden die Slice-Punkte entsprechend justiert. Wenn zum Beispiel der für den „0“-Wert zu verwendende vorbestimmte Luminanzwert 4 ist, würde der Empfänger Slice-Punkte von entweder 22, 27, 32, 37, 42, 47 oder 52, je nachdem wie es geeignet ist, verwenden. Die Bestimmung in der Empfangsvorrichtung 550, welche dieser sechs Auswahlmöglichkeiten im derzeitigen Gebrauch ist, könnte bei bestimmten Ausführungsformen unter Verwendung des in 9 oder 10 dargestellten Verfahrens bestimmt werden. Bei anderen Ausführungsformen können die Luminanzwerte auf andere Vielfache beschränkt werden. Die Verwendung von vorbestimmten Vielfachen kann auch bei einer Ausführungsform die Bestimmung des höchsten Luminanzwerts in Schritt 908 erleichtern. Zum Beispiel wählt die Empfangsvorrichtung 550 aus den möglichen vorbestimmten Zahlen den nächstliegenden Luminanzwert aus.
Es wird angemerkt, dass der eine oder die mehreren Splice-Punkte, die zum Ableiten der Datenwerte der mehreren Symbole in 11 verwendet werden, denselben Splice-Punkt wie 9 oder 10 umfassen können oder nicht. Ferner wird angemerkt, dass die Anzahl von pro Symbol codierten Bit zwischen den Symbolen in 11 und 9 und 10 abhängig von der Ausführungsform dieselbe sein kann oder nicht.
Wie oben mit Bezug auf 9 und 10 beschrieben, können Luminanzwerte aller oder einer Teilmenge der mehreren zur Codierung eines Symbols verwendeten Pixel gemittelt werden, um einen mittleren Luminanzwert entsprechend diesem Symbol zu erzeugen. Statt alle Pixel zu mitteln, werden bei einer Ausführungsform das erste und letzte Pixel übersprungen und nur die mittleren Pixel (z.B. die mittleren 6) gemittelt. Bei einer anderen Ausführungsform können die Pixel mit dem niedrigsten und/oder höchsten Wert vor der Mittelung verworfen werden.
Obwohl Ausführungsformen der vorliegenden Offenbarung beschreiben, dass der Datenwert eines Symbols auf 0 gesetzt wird, wenn ein entsprechender Luminanzwert kleiner oder gleich einem Slice-Punkt ist, und auf 1 gesetzt wird, wenn der entsprechende Luminanzwert größer als der Slice-Punkt ist, sollte beachtet werden, dass die vorliegende Offenbarung nicht darauf beschränkt ist. Bei anderen Ausführungsformen kann das Setzen von 0 und 1 umgekehrt werden. Die Vergleiche von kleiner oder gleich und größer als mit dem vorbestimmten Slice-Punkt können ferner bei anderen Ausführungsformen mit einem Vergleich von kleiner als und größer oder gleich ersetzt werden. Ähnlich können zum Setzen des Datenwerts eines Symbols verschiedene andere Verfahren benutzt werden, wenn 2 oder mehr Bit pro Symbol codiert werden.
14A–14C zeigen beispielhaften JavaScript-Code, der einen Algorithmus implementiert, mit dem mehrere in einem Bild codierte Symbole gemäß bestimmten Ausführungsformen verarbeitet werden können. Mit dem Algorithmus kann man den Spitzenwert (in dem in 13 gezeigten Beispiel 42) berechnen, der dem ursprünglich vor Videokomprimierung codierten Luminanzwert entspricht. Der Algorithmus umfasst die folgenden Schritte: über eine Periode von 1 oder mehr Einzelbildern: (1) für jeden Rahmen die Symbolwerte durch Mitteln jeder Menge von 8 Pixeln in Zeile 1 und Runden auf die nächste ganze Zahl ableiten; (2) Zählen der Anzahl von für jeden Luminanzpegel im Bereich von 20 bis 100 auftretenden Symbolwerte; und (3) Bestimmen des Luminanzwerts mit der höchsten Anzahl beobachteter Werte.
Der JavaScript-Code von 14A–14C benutzt die folgenden Variablen:
rawLuma[] – ein 1920-elementiges Array, das die unverarbeiteten Luminanzwerte (8-Bit-Werte) enthält
mySymbols[] – ein 240-elementiges Array, das die Symbolwerte enthält
bins[] – ein 256-elementiges Array, das die akkumulierte Anzahl von Vorkommnissen enthält, dass ein Symbolwert mit dem Indexwert des Arrays übereinstimmte. Zum Beispiel hält bins[30] die Gesamtzahl von Malen, wie oft ein Symbolwert von 30 in der verarbeiteten Anzahl von Einzelbildern von markiertem Video gefunden wurde.
14A zeigt beispielhaften JavaScript-Code, mit dem die Symbolwerte bei gegebenen unverarbeiteten Luminanzwerten abgeleitet werden könnten. 14B und 14C zeigen beispielhaften JavaScript-Code, mit dem der Spitzenwert der Symbolluminanz über einen Bereich, in dem der obere codierte Wert erscheinen kann, abgeleitet werden könnte. In 14B kann für jedes Einzelbild, nachdem die Symbole in mySymbols gesammelt wurden, die Akkumulation in Bins erfolgen. Nachdem ein oder mehrere Einzelbilder verarbeitet (Bin-Daten gesammelt) wurden, kann in 14C die Spitze bestimmt werden. Bei Zweipegelcodierung wäre, falls der zur Codierung des „0“-Werts verwendete Luminanzwert bekanntermaßen M ist, der ordnungsgemäße Slice-Punkt M + (Spitze – M)/2. Tests haben gezeigt, dass, selbst wenn nur ein Einzelbild auf diese Weise verarbeitet wird, eine gute erste Annäherung gegeben wird. Die Verarbeitung mehrerer Einzelbilder kann den Wert weiter verfeinern.
15 ist eine Blockdarstellung eines Beispiels für eine Hardwarekonfiguration eines Computers 1500, der dafür ausgelegt ist, eine oder eine Kombination der oben beschriebenen Funktionen, wie etwa eine oder mehrere der Funktionen der Inhaltsressource 114, der Set-Top-Box 118, des Fernsehers 122, des Servers 130, der Informationsbereitstellungsvorrichtung 250 und/oder der Empfangsvorrichtung 550 auszuführen.
Wie in 15 dargestellt, umfasst der Computer 1500 eine Zentralverarbeitungseinheit (CPU) 1502, Festwertspeicher (ROM) 1504 und einen Direktzugriffsspeicher (RAM) 1506, die über einen oder mehrere Busse 1508 miteinander verbunden sind. Der eine oder die mehreren Busse 1508 sind ferner mit einer Eingangs-Ausgangsschnittstelle 1510 verbunden. Die Eingangs-Ausgangsschnittstelle 1510 ist mit einem Eingabeteil 1512 verbunden, der durch eine Tastatur, eine Maus, ein Mikrofon, eine Fernbedienung usw. gebildet wird. Die Eingangs-Ausgangsschnittstelle 1510 ist außerdem mit Folgendem verbunden: einem Ausgabeteil 1514, gebildet durch eine Audioschnittstelle, Videoschnittstelle, Anzeige, einen Lautsprecher usw.; einem Aufzeichnungsteil 1516, der durch eine Festplatte, einen nichtflüchtigen Speicher usw. gebildet wird; einem Kommunikationsteil 1518, der durch eine Netzwerkschnittstelle, ein Modem, eine USB-Schnittstelle, eine FireWire-Schnittstelle usw. gebildet wird; und einem Laufwerk 1520 zum Laufenlassen eines Wechselmediums 1522, wie etwa eines magnetischen Datenträgers, eines optischen Datenträgers, eines magnetooptischen Datenträgers, eines Halbleiterspeichers usw.
Gemäß einer Ausführungsform lädt die CPU 1502 ein in dem Aufzeichnungsteil 1516 gespeichertes Programm über die Eingangs-Ausgangsschnittstelle 1510 und den Bus 1508 in den RAM 1506 und führt dann ein Programm aus, das dafür ausgelegt ist, die Funktionalität der Inhaltsquelle 114 und/oder der Set-Top-Box 118 und/oder des Fernsehers 122 und/oder des Servers 130 und/oder der Informationsbereitstellungsvorrichtung 250 und/oder der Empfangsvorrichtung 550 bereitzustellen.
Die Empfangsvorrichtung 550 gemäß Ausführungsformen der vorliegenden Offenbarung kann wie oben beschrieben eingebettete digitale Daten optimal wiedergewinnen, ungeachtet der Amplitude(n) (Wert(e) von Luminanz), die bei der Codierung verwendet werden. Es wird Flexibilität geboten, und der Ausstrahler kann den geeigneten Kompromiss zwischen Sichtbarkeit und Robustheit gegenüber Fehlern, die durch Videokomprimierung oder Videotranscodierung verursacht werden, wählen.
Die vorliegende Offenbarung wurde oben mit Bezug auf bestimmte Ausführungsformen erläutert. Im Hinblick auf die vorliegende Offenbarung werden Fachleuten andere Ausführungsformen einfallen. Zum Beispiel kann die vorliegende Offenbarung ohne Weiteres unter Verwendung von anderen Konfigurationen und Techniken als den in den obigen Ausführungsformen beschriebenen implementiert werden. Außerdem kann die vorliegende Offenbarung effektiv in Verbindung mit anderen Systemen als den oben beschriebenen verwendet werden. Diese und andere Varianten der besprochenen Ausführungsformen sollen deshalb durch die vorliegende Offenbarung, die nur durch die angefügten Ansprüche beschränkt wird, abgedeckt werden.
Die verschiedenen oben besprochenen Prozesse müssen nicht chronologisch in der als Flussdiagramme abgebildeten Sequenz verarbeitet werden; die Schritte können auch diejenigen umfassen, die parallel oder einzeln (z.B. auf parallelisierte oder objektorientierte Weise) verarbeitet werden.
Außerdem können die Programme durch einen einzigen Computer oder durch mehrere Computer auf verteilter Basis verarbeitet werden. Die Programme können auch zur Ausführung zu einem entfernten Computer oder zu entfernten Computern transferiert werden.
Ferner bedeutet in der vorliegenden Patentschrift der Ausdruck „System“ ein Aggregat mehrerer Komponentenelemente (Vorrichtungen, Module (Teile) usw.). Alle Komponentenelemente können in einem einzigen Gehäuse untergebracht sein oder nicht. Deshalb werden mehrere Vorrichtungen, die jeweils in einem getrennten Gehäuse untergebracht und über ein Netzwerk verbunden sind, als Netzwerk betrachtet, und eine einzige durch mehrere in einem einzigen Gehäuse untergebrachte Module gebildete Vorrichtung wird auch als System betrachtet.
Außerdem versteht sich, dass die vorliegende Technologie, wenn sie realisiert wird, nicht auf die oben beschriebenen Ausführungsformen beschränkt ist und dass verschiedene Modifikationen, Abwandlungen und Alternativen an der vorliegenden Technologie vorgenommen werden können, soweit sie im Gedanken und Schutzumfang davon liegen.
Zum Beispiel kann die vorliegende Technologie für Cloud-Datenverarbeitung strukturiert werden, wobei eine einzelne Funktion geteilt und in Kollaboration zwischen mehreren Vorrichtungen über ein Netzwerk verarbeitet wird.
Außerdem können alle in Erwähnung der oben beschriebenen Flussdiagramme erläuterten Schritte nicht nur durch eine einzige Vorrichtung ausgeführt werden, sondern auch auf geteilte Weise durch mehrere Vorrichtungen.
Wenn ein Schritt mehrere Prozesse umfasst, können ferner diese in dem Schritt enthaltenen Prozesse nicht nur durch eine einzige Vorrichtung ausgeführt werden, sondern auch auf geteilte Weise durch mehrere Vorrichtungen.
Es sind zahlreiche Modifikationen und Varianten der Ausführungsformen der vorliegenden Offenbarung im Hinblick der obigen Lehren möglich. Es versteht sich deshalb, dass die Ausführungsformen innerhalb des Schutzumfangs der angefügten Ansprüche anders als hier spezifisch beschrieben praktiziert werden können.
Die obige Offenbarung umfasst auch die nachfolgend aufgeführten Ausführungsformen.

(1) Empfangsvorrichtung mit Schaltkreisen, ausgelegt zum Empfangen oder Abrufen eines Bildes, in dem mehrere Symbole codiert sind, Bestimmen einer Menge von Luminanzwerten, die zum Codieren der Symbole verwendet werden, auf der Basis von Luminanzwerten mehrerer in dem Bild enthaltener Pixel, Bestimmen eines höchsten Luminanzwerts, der zum Codieren der Symbole in dem Bild verwendet wird, auf der Basis der bestimmten Menge von Luminanzwerten und Ableiten von Datenwerten der in dem Bild codierten Symbole auf der Basis der Menge von Luminanzwerten und unter Verwendung des bestimmten höchsten Luminanzwerts.
(2) Empfangsvorrichtung nach Merkmal (1), wobei die Schaltkreise ausgelegt sind zum Bestimmen der Menge von Luminanzwerten durch Mitteln verschiedener Teilmengen der Luminanzwerte der mehreren in dem Bild enthaltenen Pixel.
(3) Empfangsvorrichtung nach Merkmal (1) oder (2), wobei die Schaltkreise ausgelegt sind zum Bestimmen eines Slice-Punkts durch Verwendung der folgenden Gleichung: Slice-Punkt = M + (N – M)/2, wobei M gleich einem niedrigsten zum Codieren der Symbole in dem Bild verwendeten Luminanzwert und N gleich dem bestimmten höchsten Luminanzwert ist und Ableiten der Datenwerte der Symbole durch Vergleichen der Mengen von Luminanzwerten mit dem Slice-Punkt.
(4) Empfangsvorrichtung nach einem der Merkmale (1) bis (3), wobei die Schaltkreise ausgelegt sind zum Bestimmen eines höchsten zum Codieren der Symbole verwendeten Luminanzwerts auf der Basis einer Anzahl von Vorkommnissen jedes Luminanzwerts in einem vorbestimmten Bereich von Luminanzwerten, wobei der höchste Luminanzwert der Luminanzwert in dem vorbestimmen Bereich von Luminanzwerten mit der höchsten Anzahl von Vorkommnissen ist.
(5) Empfangsvorrichtung nach einem der Merkmale (1) bis (4), wobei der höchste zum Codieren der Symbole verwendete Luminanzwert auf eine vorbestimmten Menge von Werten beschränkt wird.
(6) Empfangsvorrichtung nach einem der Merkmale (1) bis (5), wobei das Bild ein Videoeinzelbild ist und die Symbole in der ersten Zeile des Videoeinzelbildes codiert werden.
(7) Empfangsvorrichtung nach einem der Merkmale (1) bis (6), wobei die Schaltkreise ausgelegt sind zum Bestimmen, ob ein vorbestimmtes festes Muster von Symboldatenwerten in dem Bild codiert ist, und Bestimmen der Menge von Luminanzwerten, Bestimmen des höchsten Luminanzwerts und Ableiten der Datenwerte der Symbole, nur wenn bestimmt wird, dass das vorbestimmte feste Muster von Symboldatenwerten in dem Bild codiert ist.
(8) Verfahren zum Verarbeiten eines Bildes, in dem mehrere Symbole codiert sind, wobei das Verfahren Folgendes umfasst: Empfangen oder Abrufen des Bildes, in dem die mehreren Symbole codiert sind, durch Schaltkreise einer Empfangsvorrichtung; Bestimmen einer Menge von zum Codieren der Symbole verwendeten Luminanzwerten auf der Basis von Luminanzwerten mehrerer in dem Bild enthaltener Pixel; Bestimmen eines höchsten zum Codieren der Symbole in dem Bild verwendeten Luminanzwerts durch die Schaltkreise auf der Basis der bestimmten Menge von Luminanzwerten; und Ableiten von Datenwerten der in dem Bild codierten Symbole durch die Schaltkreise auf der Basis der Menge von Luminanzwerten und unter Verwendung des bestimmten höchsten Luminanzwerts.
(9) Verfahren nach Merkmal (8), wobei der Schritt des Bestimmens der Menge von Luminanzwerten Folgendes umfasst: Bestimmen der Menge von Luminanzwerten durch Mitteln verschiedener Teilmengen der Luminanzwerte der mehreren in dem Bild enthaltenen Pixel.
(10) Verfahren nach Merkmal (8) oder (9), ferner umfassend: Bestimmen eines Slice-Punkts durch Verwendung der folgenden Gleichung: Slice-Punkt = M + (N – M)/2, wobei M gleich einem niedrigsten zum Codieren der Symbole in dem Bild verwendeten Luminanzwert und N gleich dem bestimmten höchsten Luminanzwert ist, wobei der Schritt des Ableitens der Symbole Ableiten der Datenwerte der Symbole durch Vergleichen der Menge von Luminanzwerten mit dem Slice-Punkt umfasst.
(11) Verfahren nach einem der Merkmale (8) bis (10), wobei der Schritt des Bestimmens des höchsten Luminanzwerts Bestimmen des höchsten zum Codieren der Symbole verwendeten Luminanzwerts auf der Basis einer Anzahl von Vorkommnissen jedes Luminanzwerts in einem vorbestimmten Bereich von Luminanzwerten umfasst, wobei der höchste Luminanzwert der Luminanzwert in dem vorbestimmen Bereich von Luminanzwerten mit der höchsten Anzahl von Vorkommnissen ist.
(12) Verfahren nach einem der Merkmale (8) bis (11), wobei der höchste zum Codieren der Symbole verwendete Luminanzwert auf eine vorbestimmten Menge von Werten beschränkt wird.
(13) Verfahren nach einem der Merkmale (8) bis (12), wobei das Bild ein Videoeinzelbild ist und die Symbole in der ersten Zeile des Videoeinzelbildes codiert werden.
(14) Verfahren nach einem der Merkmale (8) bis (13), ferner umfassend: Bestimmen, ob ein vorbestimmtes festes Muster von Symboldatenwerten in dem Bild codiert ist, wobei die Schritte des Bestimmens der Menge von Luminanzwerten, Bestimmens des höchsten Luminanzwerts und Ableitens der Datenwerte der Symbol nur ausgeführt werden, wenn bestimmt wird, dass das vorbestimmte feste Muster von Symboldatenwerten in dem Bild codiert ist.
(15) Nichttransitorisches computerlesbares Medium, das Anweisungen speichert, die, wenn sie durch einen Computer ausgeführt werden, bewirken, dass der Computer ein Verfahren zum Verarbeiten eines Bildes, in dem mehrere Symbole codiert sind, ausführt, wobei das Verfahren Folgendes umfasst: Empfangen oder Abrufen des Bildes, in dem die mehreren Symbole codiert sind; Bestimmen einer Menge von zum Codieren der Symbole verwendeten Luminanzwerten auf der Basis von Luminanzwerten mehrerer in dem Bild enthaltener Pixel; Bestimmen eines höchsten zum Codieren der Symbole in dem Bild verwendeten Luminanzwerts auf der Basis der bestimmten Menge von Luminanzwerten; und Ableiten von Datenwerten der in dem Bild codierten Symbole auf der Basis der Menge von Luminanzwerten und unter Verwendung des bestimmten höchsten Luminanzwerts.
(16) Empfangsvorrichtung mit Schaltkreisen, ausgelegt zum Empfangen oder Abrufen eines Bildes, in dem mehrere Symbole codiert sind, Bestimmen einer ersten Menge von zur Codierung der ersten Teilmenge der Symbole verwendeten Luminanzwerten auf der Basis von Luminanzwerten einer ersten Vielzahl von in dem Bild enthaltenen Pixeln, Ableiten von Datenwerten der ersten Teilmenge der in dem Bild codierten Symbole auf der Basis eines ersten vorbestimmten Slice-Punkts, Bestimmen eines zum Codieren einer zweiten Teilmenge der Symbole in dem Bild verwendeten Luminanzwerts auf der Basis der abgeleiteten Datenwerte der ersten Teilmenge der Symbole, Bestimmen einer zweiten Menge von zum Codieren der zweiten Teilmenge der Symbole verwendeten Luminanzwerten auf der Basis von Luminanzwerten einer zweiten Vielzahl von in dem Bild enthaltenen Pixeln und Ableiten von Datenwerten der zweiten Teilmenge der in dem Bild codierten Symbole auf der Basis der zweiten Menge von Luminanzwerten und unter Verwendung des bestimmten Luminanzwerts.
(17) Empfangsvorrichtung nach Merkmal (16), wobei die Schaltkreise ausgelegt sind zum Bestimmen einer dritten Menge von zum Codieren einer dritten Vielzahl von Symbolen verwendeten Luminanzwerten auf der Basis von Luminanzwerten einer dritten Vielzahl von in dem Bild enthaltenen Pixeln, Ableiten von Datenwerten der dritten Vielzahl von in dem Bild codierten Symbolen auf der Basis eines zweiten vorbestimmten Splice-Punkts, Bestimmen, ob die abgeleiteten Datenwerte der dritten Vielzahl von Symbolen mit einem vorbestimmten festen Muster von Symboldatenwerten übereinstimmen, und nur wenn die abgeleiteten Datenwerte der dritten Vielzahl von Symbolen mit dem vorbestimmten festen Muster von Symboldatenwerten übereinstimmen, Bestimmen der ersten Menge von Luminanzwerten, Ableiten der Datenwerte der ersten Teilmenge der Symbole, Bestimmen des Luminanzwerts, Bestimmen der zweiten Menge von Luminanzwerten und Ableiten der Datenwerte der zweiten Teilmenge der Symbole.
(18) Verfahren zum Verarbeiten eines Bildes, in dem mehrere Symbole codiert sind, wobei das Verfahren Folgendes umfasst: Empfangen oder Abrufen eines Bildes, in dem mehrere Symbole codiert sind, durch Schaltkreise einer Empfangsvorrichtung; Bestimmen einer ersten Menge von zur Codierung einer ersten Teilmenge der Symbole verwendeten Luminanzwerten auf der Basis von Luminanzwerten einer ersten Vielzahl von in dem Bild enthaltenen Pixeln; Ableiten von Datenwerten der ersten Teilmenge der in dem Bild codierten Symbole auf der Basis des ersten vorbestimmten Slice-Punkts; Bestimmen eines zum Codieren einer zweiten Teilmenge der Symbole in dem Bild verwendeten Luminanzwerts durch die Schaltkreise auf der Basis der abgeleiteten Datenwerte der ersten Teilmenge der Symbole; Bestimmen einer zweiten Menge von zum Codieren der zweiten Teilmenge der Symbole verwendeten Luminanzwerten auf der Basis einer zweiten Vielzahl von in dem Bild enthaltenen Pixeln; und Ableiten von Datenwerten der zweiten Teilmenge der in dem Bild codierten Symbole durch die Schaltkreise auf der Basis der zweiten Menge von Luminanzwerten und unter Verwendung des bestimmten Luminanzwerts.
(19) Empfangsvorrichtung nach Merkmal (18), ferner umfassend: Bestimmen einer dritten Menge von zum Codieren einer dritten Vielzahl von Symbolen verwendeten Luminanzwerten auf der Basis von Luminanzwerten einer dritten Vielzahl von in dem Bild enthaltenen Pixeln; Ableiten von Datenwerten der dritten Vielzahl von in dem Bild codierten Symbolen auf der Basis eines zweiten vorbestimmten Splice-Punkts; und Bestimmen, ob die abgeleiteten Datenwerte der dritten Vielzahl von Symbolen mit einem vorbestimmten festen Muster von Symboldatenwerten übereinstimmen, wobei die Schritte des Bestimmens der ersten Menge von Luminanzwerten, des Ableitens der Datenwerte der ersten Teilmenge der Symbole, des Bestimmens des Luminanzwerts, des Bestimmens der zweiten Menge von Luminanzwerten und des Ableitens der Datenwerte der zweiten Teilmenge der Symbole nur ausgeführt werden, wenn die abgeleiteten Datenwerte der dritten Vielzahl von Symbolen mit dem vorbestimmten festen Muster von Symboldatenwerten übereinstimmen.
(20) Nichttransitorisches computerlesbares Medium, das Anweisungen speichert, die, wenn sie durch einen Computer ausgeführt werden, bewirken, dass der Computer ein Verfahren zum Verarbeiten eines Bildes, in dem mehrere Symbole codiert sind, ausführt, wobei das Verfahren Folgendes umfasst: Empfangen oder Abrufen eines Bildes, in dem mehrere Symbole codiert sind; Bestimmen einer ersten Menge von zur Codierung einer ersten Teilmenge der Symbole verwendeten Luminanzwerten auf der Basis von Luminanzwerten einer ersten Vielzahl von in dem Bild enthaltenen Pixeln; Ableiten von Datenwerten der ersten Teilmenge der in dem Bild codierten Symbole auf der Basis des ersten vorbestimmten Slice-Punkts; Bestimmen eines zum Codieren einer zweiten Teilmenge der Symbole in dem Bild verwendeten Luminanzwerts auf der Basis der abgeleiteten Datenwerte der ersten Teilmenge der Symbole; Bestimmen einer zweiten Menge von zum Codieren der zweiten Teilmenge der Symbole verwendeten Luminanzwerten auf der Basis von Luminanzwerten einer zweiten Vielzahl von in dem Bild enthaltenen Pixeln; und Ableiten von Datenwerten der zweiten Teilmenge der in dem Bild codierten Symbole auf der Basis der zweiten Menge von Luminanzwerten und unter Verwendung des bestimmten Luminanzwerts.
(21) Informationsbereitstellungsvorrichtung mit Schaltkreisen, ausgelegt zum Empfangen oder Abrufen eines Bildes, in dem mehrere Symbole zu codieren sind, Codieren der mehreren Symbole in dem Bild, wobei die mehreren Symbole in dem Bild unter Verwendung von Luminanzwerten mehrerer in dem Bild enthaltender Pixel codiert werden, und Bereitstellen des Bildes, in dem die mehreren Symbole codiert sind, für eine Empfangsvorrichtung, wobei ein zum Codieren mindestens eines der mehreren Symbole verwendeter Luminanzwert von einem Betreiber gesetzt wird.
(22) Informationsbereitstellungsvorrichtung nach Merkmal (21), wobei Datenwerte einer Teilmenge der mehreren Symbole den vom Betreiber gesetzten Luminanzwert identifizieren.
(23) Informationsbereitstellungsvorrichtung nach Merkmal (21) oder (22), wobei der Betreiber eine terrestrische Fernsehsendeanstalt ist.
(24) Verfahren zum Bereitstellen eines Bildes, in dem mehrere Symbole codiert sind, wobei das Verfahren Folgendes umfasst: Empfangen oder Abrufen eines Bildes, in dem mehrere Symbole zu codieren sind, Codieren der mehreren Symbole in dem Bild durch Schaltkreise einer Informationsbereitstellungsvorrichtung, wobei die mehreren Symbole in dem Bild unter Verwendung von Luminanzwerten mehrerer in dem Bild enthaltener Pixel codiert werden, und Bereitstellen des Bildes, in dem die mehreren Symbole codiert sind, durch die Schaltkreise für eine Empfangsvorrichtung, wobei ein zum Codieren mindestens eines der mehreren Symbole verwendeter Luminanzwert von einem Betreiber gesetzt wird.
(25) Verfahren nach Merkmal (24), wobei Datenwerte einer Teilmenge der mehreren Symbole den vom Betreiber gesetzten Luminanzwert identifizieren.
(23) Verfahren nach Merkmal (24) oder (25), wobei der Betreiber eine terrestrische Fernsehsendeanstalt ist.
(20) Nichttransitorisches computerlesbares Medium, das Anweisungen speichert, die, wenn sie durch einen Computer ausgeführt werden, bewirken, dass der Computer ein Verfahren zum Bereitstellen eines Bildes, in dem mehrere Symbole codiert sind, ausführt, wobei das Verfahren Folgendes umfasst: Empfangen oder Abrufen eines Bildes, in dem die mehreren Symbole zu codieren sind, Codieren der mehreren Symbole in dem Bild, wobei die mehreren Symbole in dem Bild unter Verwendung von Luminanzwerten mehrerer in dem Bild enthaltender Pixel codiert werden, und Bereitstellen des Bildes, in dem die mehreren Symbole codiert sind, für eine Empfangsvorrichtung, wobei ein zum Codieren mindestens eines der mehreren Symbole verwendeter Luminanzwert von einem Betreiber gesetzt wird.

Claims

Empfangsvorrichtung, umfassend: Schaltkreise, ausgelegt zum Empfangen oder Abrufen eines Bildes, in dem mehrere Symbole codiert sind, Bestimmen einer Menge von Luminanzwerten, die zum Codieren der Symbole verwendet werden, auf der Basis von Luminanzwerten mehrerer in dem Bild enthaltener Pixel, Bestimmen eines höchsten Luminanzwerts, der zum Codieren der Symbole in dem Bild verwendet wird, auf der Basis der bestimmten Menge von Luminanzwerten und Ableiten von Datenwerten der in dem Bild codierten Symbole auf der Basis der Menge von Luminanzwerten und unter Verwendung des bestimmten höchsten Luminanzwerts.
Empfangsvorrichtung nach Anspruch 1, wobei die Schaltkreise ausgelegt sind zum Bestimmen der Werte von Luminanzwerten durch Mitteln verschiedener Teilmengen der Luminanzwerte der mehreren in dem Bild enthaltenen Pixel.
Empfangsvorrichtung nach Anspruch 1, wobei die Schaltkreise ausgelegt sind zum Bestimmen eines Slice-Punkts durch Verwendung der folgenden Gleichung: Slice-Punkt = M + (N – M)/2, wobei M gleich einem niedrigsten zum Codieren der Symbole in dem Bild verwendeten Luminanzwert und N gleich dem bestimmten höchsten Luminanzwert ist und Ableiten der Datenwerte der Symbole durch Vergleichen der Mengen von Luminanzwerten mit dem Slice-Punkt.
Empfangsvorrichtung nach Anspruch 1, wobei die Schaltkreise ausgelegt sind zum Bestimmen des höchsten zum Codieren der Symbole verwendeten Luminanzwerts auf der Basis einer Anzahl von Vorkommnissen jedes Luminanzwerts in einem vorbestimmten Bereich von Luminanzwerten, wobei der höchste Luminanzwert der Luminanzwert in dem vorbestimmen Bereich von Luminanzwerten mit der höchsten Anzahl von Vorkommnissen ist.
Empfangsvorrichtung nach Anspruch 1, wobei der höchste zum Codieren der Symbole verwendete Luminanzwert auf eine vorbestimmten Menge von Werten beschränkt wird.
Empfangsvorrichtung nach Anspruch 1, wobei das Bild ein Videoeinzelbild ist und die Symbole in der ersten Zeile des Videoeinzelbildes codiert werden.
Empfangsvorrichtung nach Anspruch 1, wobei die Schaltkreise ausgelegt sind zum Bestimmen, ob ein vorbestimmtes festes Muster von Symboldatenwerten in dem Bild codiert ist, und Bestimmen der Menge von Luminanzwerten, Bestimmen des höchsten Luminanzwerts und Ableiten der Datenwerte der Symbole, nur wenn bestimmt wird, dass das vorbestimmte feste Muster von Symboldatenwerten in dem Bild codiert ist.
Verfahren zum Verarbeiten eines Bildes, in dem mehrere Symbole codiert sind, wobei das Verfahren Folgendes umfasst: Empfangen oder Abrufen des Bildes, in dem die mehreren Symbole codiert sind, durch Schaltkreise einer Empfangsvorrichtung; Bestimmen einer Menge von zum Codieren der Symbole verwendeten Luminanzwerten auf der Basis von Luminanzwerten mehrerer in dem Bild enthaltener Pixel; Bestimmen eines höchsten zum Codieren der Symbole in dem Bild verwendeten Luminanzwerts durch die Schaltkreise auf der Basis der bestimmten Menge von Luminanzwerten; und Ableiten von Datenwerten der in dem Bild codierten Symbole durch die Schaltkreise auf der Basis der Menge von Luminanzwerten und unter Verwendung des bestimmten höchsten Luminanzwerts.
Verfahren nach Anspruch 8, wobei der Schritt des Bestimmens der Menge von Luminanzwerten Folgendes umfasst: Bestimmen der Menge von Luminanzwerten durch Mitteln verschiedener Teilmengen der Luminanzwerte der mehreren in dem Bild enthaltenen Pixel.
Verfahren nach Anspruch 8, ferner umfassend: Bestimmen eines Slice-Punkts durch Verwendung der folgenden Gleichung: Slice-Punkt = M + (N – M)/2, wobei M gleich einem niedrigsten zum Codieren der Symbole in dem Bild verwendeten Luminanzwert und N gleich dem bestimmten höchsten Luminanzwert ist, wobei der Schritt des Ableitens der Symbole Ableiten der Datenwerte der Symbole durch Vergleichen der Mengen von Luminanzwerten mit dem Slice-Punkt umfasst.
Verfahren nach Anspruch 8, wobei der Schritt des Bestimmens des höchsten Luminanzwerts Bestimmen des höchsten zum Codieren der Symbole verwendeten Luminanzwerts auf der Basis einer Anzahl von Vorkommnissen jedes Luminanzwerts in einem vorbestimmten Bereich von Luminanzwerten umfasst, wobei der höchste Luminanzwert der Luminanzwert in dem vorbestimmen Bereich von Luminanzwerten mit der höchsten Anzahl von Vorkommnissen ist.
Verfahren nach Anspruch 8, wobei der höchste zum Codieren der Symbole verwendete Luminanzwert auf eine vorbestimmten Menge von Werten beschränkt wird.
Verfahren nach Anspruch 8, wobei das Bild ein Videoeinzelbild ist und die Symbole in der ersten Zeile des Videoeinzelbildes codiert werden.
Verfahren nach Anspruch 8, ferner umfassend: Bestimmen, ob ein vorbestimmtes festes Muster von Symboldatenwerten in dem Bild codiert ist, wobei die Schritte des Bestimmens der Menge von Luminanzwerten, Bestimmens des höchsten Luminanzwerts und Ableitens der Datenwerte der Symbole nur ausgeführt werden, wenn bestimmt wird, dass das vorbestimmte feste Muster von Symboldatenwerten in dem Bild codiert ist.
Nichttransitorisches computerlesbares Medium, das Anweisungen speichert, die, wenn sie durch einen Computer ausgeführt werden, bewirken, dass der Computer ein Verfahren zum Verarbeiten eines Bildes, in dem mehrere Symbole codiert sind, ausführt, wobei das Verfahren Folgendes umfasst: Empfangen oder Abrufen des Bildes, in dem die mehreren Symbole codiert sind; Bestimmen einer Menge von zum Codieren der Symbole verwendeten Luminanzwerten auf der Basis von Luminanzwerten mehrerer in dem Bild enthaltener Pixel; Bestimmen eines höchsten zum Codieren der Symbole in dem Bild verwendeten Luminanzwerts auf der Basis der bestimmten Menge von Luminanzwerten; und Ableiten von Datenwerten der in dem Bild codierten Symbole auf der Basis der Menge von Luminanzwerten und unter Verwendung des bestimmten höchsten Luminanzwerts.
Informationsbereitstellungsvorrichtung, umfassend: Schaltkreise, ausgelegt zum Empfangen oder Abrufen eines Bildes, in dem mehrere Symbole zu codieren sind, Codieren der mehreren Symbole in dem Bild, wobei die mehreren Symbole unter Verwendung von Luminanzwerten mehrerer in dem Bild enthaltener Pixel in dem Bild codiert werden, und Bereitstellen des Bildes, in dem die mehreren Symbole codiert sind, für eine Empfangsvorrichtung, wobei ein zum Codieren mindestens eines der mehreren Symbole verwendeter Luminanzwert durch einen Betreiber gesetzt wird.
Informationsbereitstellungsvorrichtung nach Anspruch 16, wobei die Datenwerte einer Teilmenge der mehreren Symbole den durch den Betreiber gesetzten Luminanzwert identifizieren.
Verfahren zum Bereitstellen eines Bildes, in dem mehrere Symbole codiert sind, wobei das Verfahren Folgendes umfasst: Empfangen oder Abrufen eines Bildes, in dem die mehreren Symbole zu codieren sind, Codieren der mehreren Symbole in dem Bild durch Schaltkreise einer Informationsbereitstellungsvorrichtung, wobei die mehreren Symbole in dem Bild unter Verwendung von Luminanzwerten mehrerer in dem Bild enthaltener Pixel codiert werden, und Bereitstellen des Bildes, in dem die mehreren Symbole codiert sind, durch die Schaltkreise für eine Empfangsvorrichtung, wobei ein zum Codieren mindestens eines der mehreren Symbole verwendeter Luminanzwert durch einen Betreiber gesetzt wird.
Verfahren nach Anspruch 18, wobei die Datenwerte einer Teilmenge der mehreren Symbole den durch den Betreiber gesetzten Luminanzwert identifizieren.
Nichttransitorisches computerlesbares Medium, das Anweisungen speichert, die, wenn sie durch einen Computer ausgeführt werden, bewirken, dass der Computer ein Verfahren zum Bereitstellen eines Bildes, in dem mehrere Symbole codiert sind, ausführt, wobei das Verfahren Folgendes umfasst: Empfangen oder Abrufen eines Bildes, in dem die mehreren Symbole zu codieren sind, Codieren der mehreren Symbole in dem Bild, wobei die mehreren Symbole unter Verwendung von Luminanzwerten mehrerer in dem Bild enthaltener Pixel in dem Bild codiert werden, und Bereitstellen des Bildes, in dem die mehreren Symbole codiert sind, für eine Empfangsvorrichtung, wobei ein zum Codieren mindestens eines der mehreren Symbole verwendeter Luminanzwert durch einen Betreiber gesetzt wird.