DE60216381T2

DE60216381T2 - Panoramavideoeditieranzeige mit Navigationssteuerungsanwendung zu diesem Panoramavideo

Info

Publication number: DE60216381T2
Application number: DE60216381T
Authority: DE
Inventors: Benoit Mory; Nicolas Santini
Original assignee: Koninklijke Philips Electronics NV
Current assignee: Koninklijke Philips NV
Priority date: 2001-08-14
Filing date: 2002-08-12
Publication date: 2007-09-27
Anticipated expiration: 2022-08-13
Also published as: US8508577B2; US7916168B2; DE60216381D1; EP1286308A1; CN1407437A; JP4460818B2; CN100342322C; US20110149017A1; KR100916958B1; FR2828754A1; JP2003163927A; US20030210327A1; ATE347151T1; EP1286308B1; KR20030015149A

Description

Bereich der Erfindung
Die Erfindung betrifft eine Ausrüstung zur Videoeditieranzeige mit Navigationssteuerungsanwendung zu einem Panoramavideo mit einer dafür bestimmten Steuerungsvorrichtung, von einem Anwender bedient zu werden, um die Navigationssteuerungen im Laufe der Anzeige zu definieren.
Die Erfindung betrifft auch ein Übertragungssystem mit solch einer Anzeigeausrüstung.
Die Erfindung betrifft auch ein Verfahren zur Videoeditieranzeige mit Navigationssteuerungsanwendung zu einem Panoramavideo sowie ein Programm mit Anweisungen für die Umsetzung eines solchen Verfahrens, wenn es von einem Prozessor ausgeführt wird.
Mit diesem Ausrüstungstyp steuert der Anwender präzise, was er in einem 360°-Bild betrachten will. Derartige Ausrüstungen haben zahlreiche Anwendungsbereiche. Sie ermöglichen beispielsweise die Betrachtung von Filmen oder Programmen und verleihen dabei den Eindruck, Teil der Handlung zu sein. Sie ermöglichen einem Anwender auch eventuelle interaktive virtuelle Besuche verschiedener Seiten, beispielsweise interaktive virtuelle Besuche von Häusern, Museen...
Technologischer Hintergrund der Erfindung
Der europäische Patentantrag EP 0930584 A2 gibt an, dass es für einen Anwender möglich ist, in Panoramabildern zu navigieren, indem man die Position und die Richtung eines Blickpunktes ändert, der ein bestimmtes Blickfeld definiert.
Aber wenn der Anwender selbst seine Navigation definiert, läuft er Gefahr, sich in dem Programm zu verlieren. Dies ist besonders störend, wenn der Anwender Programme wie Filme oder Wiederholungen von Ereignissen betrachtet, weil er dann Gefahr läuft, den Handlungsverlauf nicht mehr zu verstehen.
Ein Ziel der Erfindung ist es, diesen Nachteil zu beheben.
Zusammenfassung der Erfindung
Dieses Ziel wird erreicht mit einer Anzeigeausrüstung, einem Anzeigeverfahren, einem Programm und einem Übertragungssystem wie respektive in den Ansprüchen 1, 5, 7 und 8 dieser Anmeldung beansprucht.
Gemäß der Erfindung ermöglicht es eine Auswahlvorrichtung, entweder eine vom Anwender selbst definierte Navigation oder eine vordefinierte Navigation auf das Panoramavideo anzuwenden.
In einer ersten Ausführungsform wird die Auswahl vom Anwender gesteuert. Als Beispiel kann der Anwender, der frei in einem Panoramavideo navigiert, jederzeit wählen, eine vordefinierte Navigation anzuwenden, um sich wieder der Handlung zuzuwenden. Er kann danach, wenn er es wünscht, wieder selbst eingreifen.
In einer zweiten Ausführungsform wird die Auswahl automatisch gesteuert. Als Beispiel wird eine vordefinierte Navigation in bestimmten vordefinierten Zeitpunkten angewendet, und zwischen diesen vordefinierten Zeitpunkten wird die Navigation frei vom Anwender definiert.
Man bemerke, dass der vorgenannte europäische Patentantrag EP 0930584 A2 auch angibt, dass eine andere Art, eine Animation zu schaffen, darin besteht, in einer vordefinierten Folge von Positionen und Richtungen des Blickpunktes zu navigieren. Aber dieser Navigationsmodus schließt für jede Möglichkeit der Interaktion den Anwender aus.
Die Erfindung schlägt eine kombinierte Verwendung der vom Anwender frei definierten Navigationssteuerungen und der vordefinierten Navigationssteuerungen vor. Sie ermöglicht es somit, die Vorzüge jedes der zwei nach altem Stand der Technik erwähnten Navigationsmodi zu nutzen.
Vorzugsweise werden die vordefinierten Navigationssteuerungen aus einer oder mehreren Dateien in Verwindung mit dem besagten Panoramavideo gebildet, die jeweils eine Folge von Navigationssteuerungen enthalten, die einem besonderen Editieren des Panoramavideos entspricht. Eine solche Datei ist beispielsweise eine Skriptdatei des besagten Panoramavideos, in dem die Parameter der Bewegung der Kamera definiert werden, wobei die besagten Parameter der Kamerabewegung die besagten vordefinierten Navigationssteuerungen bilden. Eine solche Datei entspricht beispielsweise der MPEG-7-Norm.
Kurze Beschreibung der Zeichnungen
Andere Details und Vorzüge der Erfindung werden in der folgenden Beschreibung ersichtlich, die hinsichtlich der beigefügten Figuren als nicht erschöpfende Beispiele gegeben werden, wobei:
1 ein allgemeines Funktionsschema eines Beispiels einer Anzeigeausrüstung nach der Erfindung ist,
2 ein Funktionsschema einer vorgezogenen Ausführungsform einer Anzeigeausrüstung nach der Erfindung ist,
3 ein Blockschema eines Beispiels eines Übertragungssystems nach der Erfindung ist.
Beschreibung von Herstellungsmodi der Erfindung
In 1 wurde ein allgemeines Funktionsschema eines Ausrüstungsbeispiels nach der Erfindung einer Panoramavideoeditieranzeige mit Navigationssteuerungsanwendung zu dem besagten Panoramavideo dargestellt.
Die Anzeigeausrüstung E enthält eine Panoramavideoquelle VS. Diese Quelle VS gibt Videodaten VD aus, die an eine dafür bestimmte Editiervorrichtung MC übertragene werden, um ein Editieren VM des besagten Panoramavideos auszufertigen.
Die Ausrüstung E enthält auch eine dafür bestimmte Steuerungsvorrichtung CTRL, von einem Anwender bedient zu werden, um die Navigationssteuerungen UN im Laufe der Anzeige zu definieren. Diese Steuerungsvorrichtung wird beispielsweise von einer Maus gebildet.
Die Ausrüstung E enthält auch eine vordefinierte Navigationssteuerungsquelle PS. In 1 gibt diese Quelle PS zwei Navigationssteuerungsfolgen aus, bezeichnet PN1 und PN2.
Die Navigationssteuerungen UN, PN1 und PN2 werden einer Auswahlvorrichtung SLT bereitgestellt. Diese Auswahlvorrichtung erhält eine Steuerung CDE, um entweder die vom Anwender definierten Navigationssteuerungen UN oder eine beliebige der vordefinierten Navigationssteuerungsfolgen PN1 und PN2, bereitgestellt von der Navigationssteuerungsquelle PS, auszuwählen. Die Auswahlvorrichtung SLT stellt danach die in der Editiervorrichtung MC ausgewählten Navigationssteuerungen bereit.
Die Steuerung CDE wird entweder aus einer Anwendersteuerung oder einer automatischen Steuerung gebildet. Wenn die Steuerung CDE eine Anwendersteuerung ist, kann der Anwender jederzeit die auf die Navigationssteuerungen anzuwendende Editiervorrichtung MC wählen. Insbesondere hat er die Möglichkeit, sich unter Verwendung der vordefinierten Navigationssteuerungen wieder der Handlung zuzuwenden. Wenn die Steuerung CDE eine automatische Steuerung ist, werden die vordefinierten Navigationssteuerungen PN1 oder PN2 beispielsweise in bestimmten vordefinierten Zeitpunkten angewendet, zwischen denen die vom Anwender definierten Navigationssteuerungen UN angewendet werden. Diese Ausführungsform ermöglicht es, dem Anwender über das Programm Navigationsführer bereitzustellen, damit er frei zwischen bestimmten vorgegebenen Blickpunkten navigieren kann, um sein Blickfeld zu ändern. Vorzugsweise entsprechen die vorgegebenen Blickpunkte den wichtigen Ereignissen des Programms. Somit läuft der Anwender nicht mehr Gefahr, den Handlungsverlauf nicht mehr zu verstehen.
In 2 wurde ein Funktionsschema einer vorgezogenen Ausführungsform einer Ausrüstung E' nach der Erfindung dargestellt. Gemäß 2 enthält die Ausrüstung E' einen Empfänger RX für den Empfang der Daten C4, im MPEG-4-Format codiert, die das besagte Panoramavideo darstellen (MPEG-4 ist eine Norm zur Codierung von der ISO definierten Audio/Video-Objekten). Die Ausrüstung E' enthält auch einen MPEG-4-Decodierer, bezeichnet DEC4, für die Decodierung der codierten Daten C4. Die decodierten Daten D4, am Ausgang des Decodierers DEC4 ausgegeben, werden der Editiervorrichtung MC' bereitgestellt.
Vorzugsweise erhält der Empfänger RX auch Daten C7, im MPEG-7-Format codiert, in Verbindung mit den Daten C4, die die vordefinierten Navigationssteuerungen enthalten (MPEG-7 ist eine Skriptnorm des Videoinhalts, von der ISO definiert, die eine bestimmte Anzahl von Deskriptoren des Videoinhalts definiert, und insbesondere einen Deskriptor der Kamerabewegung; Gemäß der Erfindung werden die in einer MPEG-7-Datei enthaltenen Deskriptoren der Kamerabewegung vorzugsweise als vordefinierte Navigationssteuerungen verwendet). Die Ausrüstung E' enthält dann einen DEC7-Decodierer für die Decodierung der Daten C7 und die Entnahme der vordefinierten Navigationssteuerungen. In 2 werden die Daten C7 aus zwei MPEG-7-Dateien gebildet, bezeichnet F1 und F2. Diese zwei Dateien F1 und F2 werden an den Eingang des Decodierers DEC7 gegeben. Der Decodierer DEC7 decodiert die Dateien F1 und F2 und entnimmt zwei Folgen der vordefinierten Navigationssteuerungen PF1 und PF2. Die zwei Folgen der vordefinierten Navigationssteuerungen werden einer Auswahlvorrichtung SLT' bereitgestellt, wobei die Auswahlvorrichtung SLT' eine Steuerung CDE' erhält, um entweder die vom Anwender definierten Navigationssteuerungen UN oder eine beliebige Folge der vom Decodierer DEC7 bereitgestellten vordefinierten Navigationssteuerungen PF1 und PFZ auszuwählen. Die Auswahlvorrichtung SLT' stellt danach die in einer Editiervorrichtung MC' ausgewählten Navigationssteuerungen bereit.
In 3 wurde ein Übertragungssystem nach der Erfindung dargestellt, das enthält:

– Einen Sender TX für die Ausstrahlung der ein Panoramavideo darstellenden Daten (beispielsweise der im MPEG-4-Format codierten Daten) und der vordefinierten Navigationssteuerungen in Verbindung mit dem besagten Panoramavideo (beispielsweise eine oder mehrere Dateien im MPEG-7-Format, die solche vordefinierten Navigationssteuerungen enthalten);
– ein Übertragungsnetz (NET);
– eine Ausrüstung einer Panoramavideoeditiernazeige (beispielsweise eine Ausrüstung vom Ausrüstungstyp E' wie hinsichtlich 2 beschrieben).

In einer anderen, nicht dargestellten Ausführungsform der Erfindung werden die das Panoramavideo darstellenden Daten und die damit verbundenen vordefinierten Navigationssteuerungen auf einem dafür bestimmten Träger (beispielsweise auf einer Platte) gespeichert, um von der Anzeigeausrüstung gelesen zu werden.
In der Praxis wird die Erfindung unter Verwendung von Softwaremitteln umgesetzt. Dafür enthält eine Ausrüstung nach der Erfindung einen oder mehrere Prozessoren und einen oder mehrere Programmspeicher, wobei die besagten Programme Anweisungen für die Umsetzung der Funktionen enthalten, die hier beschrieben wurden, wenn sie von den besagten Prozessoren ausgeführt werden.

VS: = Panoramavideoquelle
VD: = Videodaten
PS: = Navigationssteuerungsquelle
PN1, PN2, UN, PF1, PF2: = Navigationssteuerungen
CTRL: = Steuerungsvorrichtung
SLT: = Auswahlvorrichtung
CDE: = Steuerung
MC: = Editiervorrichtung
VM: = Editieren
E: = Anzeigeausrüstung
C4, C7: = codierte Daten
RX: = Empfänger
F1, F2: = MPEG-7-Dateien
DEC4: = MPEG-4-Decodierer
D4: = decodierte Daten
DEC7: = Decodierer
TX: = Sender
NET: = Übertragungsnetz

Claims

Ausrüstung (E; E') zur Videoeditieranzeige (VM; VM') mit Navigationssteuerungsanwendung zu einem Panoramavideo mit einer Steuerungsvorrichtung (CTRL), dafür bestimmt, von einem Anwender bedient zu werden, um die Navigationssteuerungen im Laufe der Anzeige zu definieren (UN), dadurch gekennzeichnet, dass sie mindestens eine Quelle (PS; RX, DEC7) vordefinierter Navigationssteuerungen (PN1, PN2; PF1, PF2) und eine Auswahlvorrichtung (SLT; SLT') enthält, um auf das Panoramavideo (VD; C4) jederzeit entweder die vordefinierten Navigationssteuerungen (PN1, PN2; PF1, PF2), von einer Quelle vordefinierter Navigationssteuerungen (PS; RX, DEC7) bereitgestellt, oder die vom Anwender (UN) definierten Navigationssteuerungen anzuwenden.
Anzeigeausrüstung nach Anspruch 1, dadurch gekennzeichnet, dass mindestens eine Quelle vordefinierter Navigationssteuerungen von einer Datei (F1, F2) in Verbindung mit dem besagten Panoramavideo (C4) gebildet wird und sie eine Folge der Navigationssteuerungen (PF1, PF2) enthält, die einem besonderen Editieren (VM') des Panoramavideos entspricht.
Anzeigeausrüstung nach Anspruch 2, dadurch gekennzeichnet, dass die besagte Datei eine Skriptdatei des besagten Panoramavideos ist, der die Parameter der Kamerabewegung definiert sind, wobei die besagten Parameter der Kamerabewegung die besagten vordefinierten Navigationssteuerungen (PF1, PF2) bilden.
Anzeigeausrüstung nach Anspruch 1, dadurch gekennzeichnet, dass sie einen Empfänger (RX) für den Empfang des besagten Panoramavideos und der vordefinierten Navigationssteuerungen (F1, F2) in Verbindung mit dem besagten Panoramavideo enthält.
Verfahren zur Videoeditieranzeige mit Navigationssteuerungsanwendung zu einem Panoramavideo mit einer Steuerungsvorrichtung (CTRL), dafür bestimmt, von einem Anwender bedient zu werden, um die Navigationssteuerungen im Laufe der Anzeige (UN) zu definieren, dadurch gekennzeichnet, dass es jederzeit zur Auswahl (SLT; SLT') steht, auf das besagte Panoramavideo entweder die von einem Anwender im Laufe der Anzeige (UN) definierten Navigationssteuerungen oder die vordefinierten Navigationssteuerungen (PN1, PN2; PF1, PF2), bereitgestellt von einer Quelle vordefinierter Navigationssteuerungen (PS; RX, DEC7) anzuwenden.
Anzeigeverfahren nach Anspruch 5, dadurch gekennzeichnet, dass mindestens eine Quelle vordefinierter Navigationssteuerungen von einer Skriptdatei (F1, F2) des besagten Panoramavideos gebildet wird, in der die Parameter der Kamerabewegung definiert sind, wobei die besagten Parameter der Kamerabewegung die besagten vordefinierten Navigationssteuerungen bilden.
Programm mit Anweisungen für die Umsetzung eines Anzeigeverfahrens gemäß einem der Ansprüche 5 oder 6, wenn es von einem Prozessor ausgeführt wird.
Übertragungssystem mit mindestens einem Sender (TX) für die Ausstrahlung eines Panoramavideos und der vordefinierten Navigationssteuerungen in Verbindung mit dem besagten Panoramavideo, einem Übertragungsnetz (NET) für die Übertragung des besagten Panoramavideos und der besagten damit verbundenen vordefinierten Navigationssteuerungen sowie einer Anzeigeausrüstung nach Anspruch 4 (E').