DE112014003669T5 - Dynamische GPU-Merkmaleinstellung basierend auf Benutzer-beobachteten Bildschirmbereich - Google Patents

Dynamische GPU-Merkmaleinstellung basierend auf Benutzer-beobachteten Bildschirmbereich Download PDF

Info

Publication number
DE112014003669T5
DE112014003669T5 DE112014003669.2T DE112014003669T DE112014003669T5 DE 112014003669 T5 DE112014003669 T5 DE 112014003669T5 DE 112014003669 T DE112014003669 T DE 112014003669T DE 112014003669 T5 DE112014003669 T5 DE 112014003669T5
Authority
DE
Germany
Prior art keywords
display
user
gpu
visual focus
display panel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
DE112014003669.2T
Other languages
English (en)
Inventor
Andrew Mecham
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nvidia Corp
Original Assignee
Nvidia Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nvidia Corp filed Critical Nvidia Corp
Publication of DE112014003669T5 publication Critical patent/DE112014003669T5/de
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1446Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display display composed of modules, e.g. video walls
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G09G3/003Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to produce spatial visual effects
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/10Special adaptations of display systems for operation with variable images
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00Aspects of interface with display user
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00Aspects of the architecture of display systems
    • G09G2360/08Power processing, i.e. workload management for processors involved in display operations, such as CPUs or GPUs

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Multimedia (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

Ein Aspekt der vorliegenden Erfindung schlägt eine Lösung vor, um eine dynamische Einstellung eines Leistungsniveaus einer GPU basierend auf dem Benutzer-beobachteten Bildschirmbereich. Gemäß einer Ausführungsform wird der Fokus eines Benutzers in einem oder mehreren Anzeigepaneln bestimmt. Die GPU, die das Rendering für diese Region und/oder dieses Anzeigepanel durchführt, wird das Leistungsniveau als Antwort auf den Fokus des Benutzers dynamisch einstellen (d.h. erhöhen), wohingegen alle andere GPUs (z.B. die GPUs, die das Rendering für andere Regionen/Anzeigepanel durchführen) ein verringertes Leistungsniveau erfahren werden. Gemäß einer derartigen Ausführungsform kann das dynamische Verringern der Leistung von GPUs außerhalb des Bereichs des Fokus zu irgendeinem von einem oder mehreren einer bedeutenden Anzahl von Vorteilen, einschließlich niedrigerer Leistungsverbrauchsraten, weniger Verarbeitung, weniger (häufige) Speicherzugriffe und verringerter Wärme und Geräuschpegeln führen.

Description

  • HINTERGRUND DER ERFINDUNG
  • Graphikverarbeitungssubsysteme werden verwendet, um das Rendering von Graphik in modernen Rechensystemen, wie beispielsweise Desktops, Notebooks und Videospielkonsolen usw., durchzuführen. Herkömmlicherweise umfassen Graphikverarbeitungssubsysteme eine oder mehrere Graphikverarbeitungseinheiten oder “GPUs(Graphics Processing Units)", die spezialisierte Prozessoren sind, die ausgestaltet sind, um Graphikverarbeitungsoperationen effizient durchzuführen.
  • Einige moderne Hauptleiterplatten umfassen häufig zwei oder mehrere Graphiksubsysteme. Beispielsweise umfassen gewöhnliche Konfigurationen eine integrierte Graphikverarbeitungseinheit sowie auch einen oder mehrere zusätzliche Erweiterungsteckplätze, die verfügbar sind, um eine oder mehrere diskrete Graphikeinheiten hinzuzufügen. Jedes Graphikverarbeitungssubsystem kann haben und typischerweise hat seine eigenen Ausgangsterminals mit einem oder mehreren Anschlüssen, die einem oder mehreren audio/visuellen Standards (z.B. VGA, HDMI, DVI, etc.) entsprechen, obwohl typischerweise nur eines der Graphikverarbeitungssubsysteme in dem Rechensystem zu einer beliebigen Zeit laufen wird.
  • Alternativ können andere moderne Rechensysteme eine Hauptleiterplatte, die imstande ist, zwei oder mehrere GPUs (auf einer einzigen Karte) oder sogar zwei oder mehrere individual zugeordnete Videokarten gleichzeitig zu nutzen, um eine Ausgabe zu einer einzigen Anzeige zu erzeugen. In diesen Implementierungen teilen sich zwei oder mehrere Graphikverarbeitungseinheiten (GPUs) die Arbeitslast gemeinsam, wenn Graphikverarbeitungsaufgaben für das System durchgeführt werden, wie beispielsweise das Rendering einer 3-dimensionalen Szene. Idealerweise werden zwei (oder mehrere) identische Graphikkarten in einem Motherboard installiert, das eine gleiche Anzahl von Erweiterungssteckplätzen enthält, die in einer “Master-Slave(s)“-Konfiguration eingerichtet sind. Jeder Karte wird der gleiche Teil der 3D Szene zum Rendering gegeben, wobei jedoch wirksamer Weise ein Abschnitt der Arbeitslast von der (den) Slave-Karte(en) verarbeitet wird und das resultierende Bild durch eine Verbinder genannte GPU-Brücke oder durch einen Kommunikationsbus (z.B. dem PCI-Expressbus) gesendet wird. Für eine typische Szene in einer Einzel-Panel/Mehrfach-GPU-Konfiguration rendert die Master-Karte beispielsweise einen Abschnitt (z.B. den obersten Abschnitt) der Szene, während die Slave-Karte(en) die verbleibenden Abschnitte rendert(rendern). Wenn die Slave-Karte(en) das Durchführen der Rendering-Operationen abgeschlossen hat (haben), um die Szene graphisch anzuzeigen, sendet (senden) die Slave-Karte(en) ihre jeweiligen Ausgaben an die Master-Karte, welche die erzeugten Bilder synchronisiert und kombiniert, um ein aggregiertes Bild zu bilden und dann die endgültige gerenderte Szene an die Anzeigevorrichtung auszugeben. In jüngeren Entwicklungen können die durch GPUs gerenderten Abschnitte der Szene dynamisch eingestellt werden, um Unterschiede in der Komplexität von lokalisierten Abschnitten der Szene zu berücksichtigen.
  • In jüngster Zeit haben Konfigurationen, die durch Mehrfach-GPU-Systeme gekennzeichnet sind, die eine Ausgabe an mehreren Anzeigen anzeigt, immer mehr an Popularität gewonnen. In diesen Systemen wird jede GPU individuell mit einer Anzeigevorrichtung gekoppelt, wobei das Betriebssystem des zu Grunde liegenden Computersystems und seine ausführenden Anwendungen die mehreren Subsysteme als ein einziges kombiniertes Graphiksubsystem mit einer totalen Auflösung gleich der Summe der GPU-gerenderten Bereiche empfindet. Mit den herkömmlichen Mehrfach-GPU-Techniken rendert jede GPU eine statische Partition der kombinierten Szene und gibt das jeweilige gerenderte Teil an ihre angeschlossene Anzeige aus. Typischerweise werden Anzeigemonitoren nebeneinander (horizontal oder vertikal) platziert, um dem Benutzer den Eindruck einer einzelnen großen Anzeige zu geben. Jeder Anzeigemonitor zeigt einen Bruchteil (oder “Rahmen") der Szene an. Obwohl jede GPU ihre entsprechende Partition individuell rendert, wird eine abschließende Synchronisation unter den GPUs für jeden Rahmen der Szene vor dem Anzeigen (auch als “present" bekannt) der Szene auf den Anzeigevorrichtungen durchgeführt.
  • Herkömmlicherweise wird jede GPU bei äquivalenten, vorausgewählten Leistungsniveaus arbeiten. Während Spiele gespielt werden oder während anderer visuell intensiven Sitzungen wird sich ein Benutzer einer derartigen Konfiguration jedoch typischerweise auf eine Region eines einzelnen Panels zu irgendeinem Zeitpunkt fokussieren, obwohl sich die besondere Region und/oder Anzeigepanel häufig ändern kann. Beispielsweise ist in vielen Videospielen der Fokus einer Szene typischerweise die Mitte der Szene, obwohl die Aufmerksamkeit des Benutzers von Zeit zu Zeit auf andere Abschnitte der Szene gerichtet sein kann. In diesen Fällen ist es unnötig, die GPUs der Anzeigen laufen zu lassen, die nicht den Fokus des Benutzers auf dem gleichen Niveau wie die Anzeige aufweist, welche die Aufmerksamkeit des Benutzers auf sich zieht, und führt zu einer grundlosen und ineffizienten Verwendung von Rechenressourcen.
  • ZUSAMMENFASSUNG DER ERFINDUNG
  • Diese Zusammenfassung wird bereitgestellt, um eine Auswahl von Konzepten in einer vereinfachten Form einzuführen, die nachstehend in der detaillierten Beschreibung weiter beschrieben werden. Diese Zusammenfassung ist nicht dazu bestimmt, Schlüsselmerkmale oder wesentliche Merkmale des beanspruchten Gegenstandes zu kennzeichnen, noch ist sie dazu bestimmt, verwendet zu werden, um den Schutzumfang des beanspruchten Gegenstandes zu begrenzen.
  • Ein Aspekt der vorliegenden Erfindung schlägt eine Lösung vor, um eine dynamische Einstellung eines Leistungsniveaus einer GPU basierend auf dem beobachteten Bildschirmbereich des Benutzers zu ermöglichen. Gemäß einer Ausführungsform wird ein Fokus eines Benutzers in einem oder mehreren Anzeigepaneln bestimmt. Die GPU, die das Rendering für diese Region und/oder Anzeigepanel durchführt, wird das Niveau der Leistung als Antwort auf den Fokus des Benutzers dynamisch einstellen (d.h. erhöhen), wohingegen alle anderen GPUs (z.B. die GPUs, die das Rendering für andere Regionen/Anzeigepanel durchführen) ein verringertes Leistungsniveau erfahren werden. Gemäß einer derartigen Ausführungsform kann das dynamische Verringern der Leistung von GPUs außerhalb des Bereichs des Fokus zu irgendeinem oder mehreren einer bedeutenden Anzahl von Vorteilen, einschließlich niedrigeren Leistungsverbrauchsraten, weniger Verarbeitung, weniger (häufige) Speicherzugriffe, und verringerten Wärme und Geräuschpegel, führen.
  • In einer Ausführungsform wird der beobachtete Bereich des Benutzers (z.B. Fokus) fortwährend bestimmt. Änderungen in dem Fokus des Benutzers werden zu einer entsprechenden Änderung in den Leistungsniveaus der entsprechenden Anzeigen führen. Die Leistungsniveaus können durch Aktivieren oder Deaktivieren (jeweiliger) Merkmale dynamisch erhöht oder verringert werden. Beispielsweise kann ein Benutzer, der sich auf eine Region oder einen Bereich in einem mittleren Anzeigepanel von drei horizontal ausgelegten Anzeigepaneln fokussiert, veranlassen, dass bestimmte zu aktivierende Merkmale in der GPU des mittleren Anzeigepanels aktiviert werden, wobei die gleichen Merkmale in den GPUs der linken und rechten Anzeigepanel deaktiviert werden. Wenn sich der Fokus des Benutzers zu dem linken Anzeigepanel hin ändert, wird das System die Änderung erfassen und automatisch das Leistungsniveau (z.B. durch Aktivieren bestimmter, vorgekennzeichneter Merkmale) in dem linken Anzeigepanel erhöhen, das Leistungsniveau in dem zentralen Anzeigepanel verringern und ein niedrigeres Leistungsniveau in dem äußersten rechten Anzeigepanel beibehalten.
  • Gemäß einiger Aspekte kann die Erfassung des beobachteten Bildschirmbereichs des Benutzers durch ein oder mehrere Augenverfolgungsverfahren durchgeführt werden. In einer Ausführungsform kann die durch die GPUs erzeugte graphische Ausgabe Stereo oder dreidimensionale Bilder umfassen, die spezialisierte optische Vorrichtungen (z.B. 3D-Brillen) für ein vollständiges Erlebnis verlangen. Gemäß einer derartigen Ausführungsform können Videoaufzeichnungsvorrichtungen (z.B. kleine Kameras) an den optischen Vorrichtungen angebracht werden, welche die Augenbewegungen des Benutzers verfolgen. In anderen Ausführungsformen kann die Position, Richtung und Orientierung der 3D-Brillen entweder durch eine Bewegungserfassungs- oder Verfolgungsvorrichtung extern zu der optischen Vorrichtung und/oder mit einer auf den optischen Vorrichtungen angeordneten ähnlichen Vorrichtung selbst verfolgt werden.
  • Gemäß einem anderen Aspekt der vorliegenden Erfindung wird eine Lösung vorgeschlagen, die Computerressourcenersparnisse über eine Einstellung in einem einzigen Anzeigepanel ermöglicht. Gemäß einer Ausführungsform wird eine Benutzer-Fokus-Verfolgung durchgeführt, um die besonderen Regionen eines einzelnen Anzeigepanels zu bestimmen. Regionale Leistungsniveaus werden basierend auf dem bestimmten Fokus eingestellt. Gemäß diesen Ausführungsformen können die Computerressourcenersparnisse sogar auf Konfigurationen mit einem Anzeigepanel angewendet werden.
  • KURZE BESCHREIBUNG DER ZEICHNUNGEN
  • Die begleitenden Zeichnungen werden aufgenommen in und bilden einen Teil dieser Spezifikation. Die Zeichnungen veranschaulichen Ausführungsformen. Zusammen mit der Beschreibung dienen die Zeichnungen dazu, die Prinzipien der Ausführungsformen zu erläutern:
  • 1 stellt ein Ablaufdiagramm eines Vorgangs zur dynamischen Leistungseinstellung in einer Mehrfach-GPU, Mehrfach-Anzeigensystem basierend auf einem Benutzer-beobachteten Bildschirmbereich gemäß verschiedener Ausführungsformen der vorliegenden Erfindung anschaulich dar.
  • 2A stellt eine erste beispielhafte Mehrfachanzeige-Konfiguration mit relativen Leistungsniveaus basierend auf einem Benutzer-beobachteten Bildschirmbereich gemäß verschiedener Ausführungsformen der vorliegenden Erfindung anschaulich dar.
  • 2B stellt eine zweite beispielhafte Mehrfachanzeige-Konfiguration mit relativen Leistungsniveaus basierend auf einem Benutzer-beobachteten Bildschirmbereich gemäß verschiedener Ausführungsformen der vorliegenden Erfindung anschaulich dar.
  • 2C stellt eine dritte beispielhafte Mehrfachanzeige-Konfiguration mit relativen Leistungsniveaus basierend auf einem Benutzer-beobachteten Bildschirmbereich gemäß verschiedener Ausführungsformen der vorliegenden Erfindung anschaulich dar.
  • 3A stellt eine erste beispielhafte graphische Bildschirmausgabe, die relative Leistungsniveaus angibt, basierend auf einem Benutzer-beobachteten Bildschirmbereich gemäß verschiedener Ausführungsformen der vorliegenden Erfindung anschaulich dar.
  • 3B stellt eine zweite beispielhafte graphische Bildschirmausgabe, die relative Leistungsniveaus angibt, basierend auf einem Benutzer-beobachteten Bildschirmbereich gemäß verschiedener Ausführungsformen der vorliegenden Erfindung anschaulich dar.
  • 3C stellt eine dritte beispielhafte graphische Bildschirmausgabe, die relative Leistungsniveaus angibt, basierend auf einem Benutzer-beobachteten Bildschirmbereich gemäß verschiedener Ausführungsformen der vorliegenden Erfindung anschaulich dar.
  • 4 stellt eine beispielhafte optische Vorrichtung mit Augenverfolgungsfähigkeit gemäß Ausführungsformen der vorliegenden Erfindung anschaulich dar.
  • 5 stellt ein beispielhaftes Rechensystem anschaulich dar, auf dem Ausführungsformen der vorliegenden Erfindung implementiert werden können.
  • DETAILLIERTE BESCHREIBUNG
  • Bezug wird nun ausführlich auf die bevorzugten Ausführungsformen des beanspruchten Gegenstandes, ein Verfahren und System für die Verwendung eines radiographischen Systems, genommen, wobei Beispiele desselben in den begleitenden Zeichnungen veranschaulicht werden, wobei, obwohl der beanspruchte Gegenstand in Verbindung mit den bevorzugten Ausführungsformen beschrieben wird, es sich versteht, dass sie nicht dazu bestimmt sind, diese Ausführungsformen zu beschränken. Der beanspruchte Gegenstand ist im Gegenteil dazu bestimmt, Alternativen, Modifikationen und Äquivalente abzudecken, die innerhalb des Geistes und Schutzumfanges umfasst sein können, wie durch die beigefügten Ansprüche definiert.
  • Des Weiteren werden in den folgenden detaillierten Beschreibungen von Ausführungsformen des beanspruchten Gegenstands zahlreiche spezifische Einzelheiten dargelegt, um ein tiefgreifendes Verständnis des beanspruchten Gegenstands bereitzustellen. Ein Fachmann wird jedoch erkennen, dass der beanspruchte Gegenstand ohne diese spezifischen Einzelheiten praktiziert werden kann. In anderen Fällen wurden bekannte Verfahren, Prozeduren, Bauteile und Schaltungen nicht detailliert beschrieben, um Aspekte des beanspruchten Gegenstands nicht unnötigerweise zu verschleiern.
  • Einige Abschnitte der detaillierten Beschreibungen, die folgen, werden hinsichtlich Prozeduren, Schritten, Logikblöcken, Verarbeitung und anderen symbolischen Darstellungen von Operationen an Datenbits präsentiert, die an einem Computerspeicher durchgeführt werden können. Diese Beschreibungen und Darstellungen sind die Mittel, die von einem Fachmann auf dem Gebiet der Datenverarbeitung verwendet werden, um das Wesentliche seiner Arbeit am wirksamsten an andere Fachleute zu übermitteln. Eine Prozedur, computererzeugter Schritt, Logikblock, Vorgang, etc., wird hier und im Allgemeinen als eine selbstkonsistente Sequenz von Schritten oder Anweisungen aufgefasst, die zu einem gewünschten Ergebnis führen. Die Schritte sind jene, die physikalische Manipulationen von physikalischen Größen verlangen. Gewöhnlicher Weise, obwohl nicht notwendigerweise, nehmen diese Größen die Form von elektrischen oder magnetischen Signalen an, die sich dazu eignen, gespeichert, transferiert, kombiniert, verglichen und auf andere Weise in einem Computersystem manipuliert zu werden. Es hat sich zuweilen hauptsächlich aus Gründen des verbreiteten Gebrauchs als zweckmäßig erwiesen, diese Signale als Bits, Werte, Elemente, Symbole, Zeichen, Ausdrücke, Zahlen oder dergleichen zu bezeichnen.
  • Es sollte jedoch im Gedächtnis behalten werden, dass alle diese und ähnliche Ausdrücke den geeigneten physikalischen Größen zuzuordnen sind und lediglich geeignete Etikette sind, die auf diese Größen angewendet werden. Wenn es nicht anderweitig angegeben ist, wie aus der folgenden Erläuterung ersichtlich, wird angenommen, dass durch den Gegenstand hindurch Erläuterungen, die Ausdrücke, wie „Speichern”, „Erzeugen”, „Schützen”, „Empfangen”, „Verschlüsseln”, „Entschlüsseln”, „Zerstören” oder dergleichen benutzen, sich auf die Wirkung und Prozesse eines Computersystems oder einer integrierten Schaltung oder einer ähnlichen elektronischen Vorrichtung beziehen, einschließlich eines eingebetteten Systems, die Daten, die als physikalische (elektronische) Größen innerhalb der Register und Speicher des Computersystems repräsentiert sind, in andere Daten manipuliert und transformiert, die auf ähnliche Weise als physikalische Größen innerhalb der Speicher oder Register des Computersystems oder anderer solcher Informationsspeicher, Übertragungs- oder Anzeigevorrichtungen repräsentiert sind.
  • Ausführungsformen des beanspruchten Gegenstands werden dargestellt, um eine Bildanzeigevorrichtung, wie beispielsweise einen Flachbildschirmfernseher oder Flachbildschirmmonitor zu umfassen, die mit einer oder mehreren Hintergrundbeleuchtungen ausgestattet ist. Diese Hintergrundbeleuchtungen können programmiert werden, um eine Beleuchtung für Pixel der Bildanzeigevorrichtung bereitzustellen. In bestimmten Ausführungsformen trennt die Position der Hintergrundbeleuchtung(en) die Pixel der Bildanzeigevorrichtung in eine Mehrzahl von Regionen, wobei jede Region der Hintergrundbeleuchtung zugeordnet ist, deren Position am nächsten zu der Region ist, und die eine primäre Beleuchtungsquelle für die Pixel in der Region bereitstellen. In bestimmten Ausführungsformen kann die durch benachbarte Hintergrundbeleuchtungen bereitgestellte Beleuchtung in einem oder mehreren Abschnitten von einer oder mehreren Regionen überlappen. In noch weiteren Ausführungsformen verringert sich (schwächt sich ab) die von einer Hintergrundbeleuchtung bereitgestellte Intensität der Beleuchtung je größer der Abstand von der Hintergrundbeleuchtung wird.
  • BEISPIELHAFTE ANZEIGEEINSTELLUNG BASIEREND AUF EINEM BENUTZER-BEOBACHTETEN BEREICH
  • 1 veranschaulicht ein Ablaufdiagramm eines beispielhaften Verfahrens 100 zur dynamischen Leistungseinstellung in einem Mehrfach-GPU/Mehrfach-Anzeigesystem basierend auf einem Benutzer-beobachteten Bildschirmbereich gemäß Ausführungsformen der vorliegenden Erfindung. Schritte 101107 beschreiben beispielhafte Schritte, die den Vorgang 100 gemäß der hier beschriebenen verschiedenen Ausführungsformen umfassen. Gemäß verschiedenen Ausführungsformen können die Schritte 101107 kontinuierlich während einer ganzen Nutzungssitzung oder Betrachtungssitzung wiederholt werden. Gemäß einem Aspekt der beanspruchten Erfindung kann der Vorgang 100 beispielsweise in einem System durchgeführt werden, das eine oder mehrere Graphikverarbeitungssubsysteme umfasst, die individuell mit einer äquivalenten Mehrzahl von Anzeigevorrichtungen gekoppelt und ausgelegt sind, um parallel zu arbeiten, um eine einzigen zusammenhängenden Anzeigebereich zu präsentieren. Diese Graphikverarbeitungssubsysteme können als Hardware, z.B. diskrete Graphik-Verarbeitungseinheiten oder "Videokarten“, oder in einigen Ausführungsformen als virtuelle GPUs implementiert sein. Für beispielhafte Zwecke wird hier eine Ausführungsform beschrieben, die gekennzeichnet wird durch eine Drei-GPU-Konfiguration, die drei diskrete Videokarten in einem Rechensystem umfasst, wobei jede Videokarte mit einer Anzeigevorrichtung (z.B. einem Monitor, Bildschirm, Anzeigepanel, etc.) verbunden ist, die in einer horizontalen Konfiguration platziert wird.
  • Eine beispielhafte Szene, die in der Mehrzahl von Anzeigevorrichtungen anzuzeigen ist, wird unter den Anzeigevorrichtungen entsprechend den Abschnitten der Szene aufgeteilt, die durch jede GPU für jede Szene zu rendern ist. Der Abschnitt der Szene, der in einer Anzeigevorrichtung angezeigt wird, bildet den “Rahmen” der entsprechenden Anzeige und GPU-Beziehung. In einer alternativen Ausführungsform können zwei oder mehrere Graphikverarbeitungssubsysteme mit der gleichen Anzeigevorrichtung gekoppelt und ausgelegt sein, um eine graphische Ausgabe für Abschnitte des gleichen Anzeigerahmens zu rendern. Gemäß einem anderen Aspekt kann der Vorgang 100 als eine Reihe von computerausführbaren Anweisungen implementiert werden.
  • Bei Schritt 401 wird ein visueller Fokus des Benutzers angefragt und bestimmt. Gemäß einigen Aspekten kann die Erfassung des visuellen Fokus des Benutzers von einem oder mehreren Augenverfolgungsverfahren durchgeführt werden. In einer Ausführungsform kann die von den GPUs erzeugte graphische Ausgabe Stereo oder dreidimensionale Bilder umfassen, die spezialisierte optische Vorrichtungen (z.B. Brillen) für ein vollständiges Erlebnis verlangen. Gemäß einer derartigen Ausführungsform können Videoaufzeichnungsvorrichtungen, wie beispielsweise eine oder mehrere kleine Kameras, an den optische Vorrichtungen angebracht werden, welche die Augenbewegungen des Benutzers verfolgen. Diese Kameras können ferner ausgelegt sein, um die Augenbewegungen zu verarbeiten, um den visuellen Fokus des Benutzers zu bestimmen. Das Verfolgen des visuellen Fokus des Benutzers kann das Bestimmen einer Region oder eines Abschnitts eines Anzeigepanels, die/den der Benutzer aktiv betrachtet, eine Blickrichtung des Benutzers, oder andere Angaben der visuellen Aufmerksamkeit oder Interesses des Benutzers umfassen.
  • Alternativ kann die Kamera ausgelegt sein, um (z.B. über ein drahtloses Kommunikationsprotokoll) an einen Prozessor in dem Rechensystem zu übertragen, in dem die GPUs enthalten sind), um die Analyse durchzuführen und die besondere Region und/oder das Anzeigepanel herzuleiten, auf die sich der Benutzer fokussiert. In anderen Ausführungsformen kann die Position, Richtung und Orientierung der drei optischen Vorrichtungen selbst verfolgt werden, entweder durch eine Bewegungserfassungs- oder Verfolgungsvorrichtung extern zu der optischen Vorrichtung und/oder mit einer ähnlichen Vorrichtung, die auf den optischen Vorrichtungen angeordnet ist. In weiteren Ausführungsformen kann die Position, Richtung und Orientierung der optischen Vorrichtung gyroskopisch unter Verwendung eines Gyroskop durchgeführt werden, das ausgelegt ist, die gyroskopischen Orientierung zu bestimmen und an das Rechensystem auszugeben. Alternativ können Ausführungsformen Bewegungserfassungs-Vorrichtungen zusätzlich zu oder anstelle von gyroskopischen Positionierungssystemen verwenden.
  • Gemäß einigen Ausführungsformen kann die Erfassung des visuellen Fokus des Benutzers wiederholt (z.B. bei kurzen, vorbestimmten Intervallen) über den Verlauf einer Nutzungssitzung durchgeführt werden. Beispielsweise können die auf der optischen Vorrichtung angebrachten Kameras das Auge des Benutzers zur Angabe der Bewegung oder Position abtasten und die resultierenden Daten an das Rechensystem jede Millisekunde (1/1000stel einer Sekunde) senden. Auf ähnliche Weise kann für Ausführungsformen, bei denen die Bewegung und/oder Orientierung einer optischen Vorrichtung, gyroskopischen und/oder Bewegungs-Erfassung durchgeführt werden kann, wobei die Daten bei ähnlichen Intervallen übertragen werden. Während Ausführungsformen unter Verwendung beispielhaften Augenverfolgungs-, gyroskopischen und/oder Bewegungserfassungs-Verfahren beschrieben werden, ist zu verstehen, dass Ausführungsformen der beanspruchten Erfindung zur Verwendung mit alternativen Implementierungen dieser Technologien zusätzlich zu den hier beschriebenen gut geeignet sind.
  • Bei Schritt 103 werden Daten analysiert, die dem bestimmten visuellen Fokus (z.B. aufgrund von Augenverfolgungs-, gyroskopischen und/oder Bewegungserfassungs-Verfahren) entsprechen, um ein Anzeigepanel zu bestimmen, das dem beobachteten Bereich des Benutzers entspricht. In Mehrfachanzeige-Konfigurationen kann beispielsweise das spezifische Panel bestimmt werden. In Einzel-Anzeige-Konfigurationen kann die besondere Region auf dem Anzeigepanel bestimmt werden. Analyse und Verarbeitung der Daten können von einem Prozessor in dem Rechensystem durchgeführt werden. In einigen Ausführungsformen können Augenverfolgungs- oder Positionierdaten (z.B. drahtlos) in einem drahtlosen Empfänger empfangen werden, der mit dem Rechensystem gekoppelt ist. In einigen Ausführungsformen können die Daten von einem in dem drahtlosen Empfänger enthaltenen Prozessor verarbeitet werden. In alternativen Ausführungsformen können die Daten verpackt, formatiert und an eine zentrale Verarbeitungseinheit des Rechensystems weitergeleitet werden. Sobald das besondere Anzeigepanel (oder Anzeigenregion) gekennzeichnet ist, werden Anweisungen an eine oder mehrere GPUs des Systems geliefert, um die GPUs zu benachrichtigen, ihre jeweiligen Leistungsniveaus nach Bedarf anzupassen.
  • Bei Schritt 405 wird das Leistungsniveau der GPU dynamisch angepasst, die dem Anzeigepanel (oder der Region) des Fokus des Benutzers entspricht. Das Einstellen des Leistungsniveaus kann in einigen Ausführungsformen das Aktivieren bestimmter Merkmale umfassen, die das Rendering der graphischen Ausgabe beeinflussen. Diese Merkmale können umfassen (sind jedoch nicht beschränkt auf):
    Anti-Aliasing;
    Filterung;
    dynamischer Beleuchtungsbereich;
    Deinterlacing;
    Hardwarebeschleunigung;
    Skalierung; und
    Farb- und Fehlerkorrektur.
  • Einige oder alle dieser Merkmale können in der GPU aktiviert sein, die zum Erzeugen der graphischen Ausgabe für das Anzeigepanel (oder die Region) verantwortlich ist, die dem bei Schritt 103 bestimmten visuellen Fokus des Benutzers entspricht.
  • Gemäß einigen Ausführungsformen kann jede GPU in dem System ausgelegt sein, um bei einer Mehrzahl von vordefinierten, relativen Leistungsniveaus zu arbeiten. Diese Leistungsniveaus können Taktfrequenzen entsprechen und ein oder mehrere Merkmale (oben beschrieben) umfassen. Bei höheren Leistungsniveaus können die erhöhten Taktfrequenzen zu höheren Leistungsverbrauchsraten, häufigeren Speicherzugriffsanforderungen und mehr Wärme und Lüftergeräusche führen. Gemäß Ausführungsformen, bei denen die GPUs ausgelegt sind, um in einem von mehreren relativen Leistungsniveaus zu arbeiten, kann die GPU der Anzeige, die dem Fokus des Benutzer entspricht, bei Schritt 405 auf das höchste Leistungsniveau dynamisch eingestellt werden. Falls keine Änderung in dem Bereich des Fokus des Benutzers in Schritten 101 und 103 erfasst wird, bleibt die GPU des Anzeigepanels, die dem Fokus des Benutzers entspricht, auf ihrem bisherigen (hohen) Niveau im Betrieb.
  • Bei Schritt 407 werden das(die) Leistungsniveau(s) der einen oder mehreren GPUs in dem System, die nicht dem Anzeigepanel oder der Region des Fokus des Benutzers (wie bei Schritt 103 bestimmt) entsprechen, dynamisch eingestellt. In einigen Fällen wird Schritt 407 gleichzeitig (oder synchron) mit Schritt 405 durchgeführt. In einer Ausführungsform können die Leistungsniveaus dieser GPUs entweder durch Deaktivieren bestimmter Merkmale (z.B. der oben mit Bezug auf Schritt 405 aufgelisteten Merkmale) verringert werden. In weiteren Ausführungsformen kann das Leistungsniveau auf ein vordefiniertes Leistungsniveau verringert werden, das die Taktfrequenz der GPU einstellen und ein oder mehrere Merkmale deaktivieren kann. Gemäß derartigen Ausführungsformen wird das Verringern des Leistungsniveaus einer GPU zu niedrigeren Leistungsverbrauchsraten, voraussichtlich weniger (oder weniger häufigen) Speicherzugriffsanforderungen und weniger Wärme und Lüftergeräusch führen.
  • In einigen Ausführungsformen kann das vordefinierte Leistungsniveau eines von zwei oder mehreren diskreten Leistungsniveaus sein. In alternativen Ausführungsformen kann das Leistungsniveau einem Leistungsniveau in einem Bereich inkrementell (aufsteigender oder absteigender) Leistungsniveaus entsprechen. In mehreren Anzeigekonfigurationen können die Leistungsniveaus der GPUs verringert werden, die bestimmt werden, nicht dem Anzeigepanel zu entsprechen, das den beobachteten Bildschirmbereich des Benutzers umfasst. Dies findet statt, wenn eine GPU zuvor auf einem höheren Leistungsniveau arbeitete (z.B. dem beobachteten Bildschirmbereich des Benutzers dem Anzeigepanel entsprach, das mit der GPU während der letzten Iteration des Vorgangs gekoppelt war). Für GPUs, die bereits bei niedrigeren Leistungsniveaus arbeiteten, kann keine Änderung notwendig sein. Gemäß einigen Ausführungsformen können bestimmte Anwendungen ein minimales Leistungsniveau erfordern. In diesen Fällen kann das Leistungsniveau einer GPU sogar dann nicht unter das erforderliche minimale Leistungsniveau verringert werden, wenn bestimmt wird, dass der beobachtete Bildschirmbereich des Benutzers das Anzeigepanel ist, das einer unterschiedlichen GPU entspricht. Stattdessen können die Leistungsniveaus der GPU auf dem niedrigsten Leistungsniveau beibehalten werden, für welche die Anwendung laufen kann, bis der beobachtete Fokus des Benutzers dem Anzeigepanel dieser GPU entspricht.
  • BEISPIELHAFTE ANZEIGEKONFIGURATIONEN
  • 2A2C stellen beispielhafte Mehrfach-Anzeigekonfigurationen mit relativen Leistungsniveaus basierend auf einem Benutzer-beobachteten Bildschirmbereich gemäß verschiedener Ausführungsformen der vorliegenden Erfindung anschaulich dar. Wie in 2a2c anschaulich dargestellt, wird eine Drei-Anzeigepanel-Konfiguration in einer horizontalen Orientierung bereitgestellt. In derartigen Ausführungsformen kann jede der drei Anzeigepanel kommunikativ mit einer graphischen Verarbeitungseinheit in dem gleichen Rechensystem gekoppelt sein und verwendet werden, um die graphische Ausgabe von einer oder mehreren Anwendungen gleichzeitig anzuzeigen.
  • Wie in 2A anschaulich dargestellt, befindet sich ein Benutzer 201a vor jeder von drei Anzeigepaneln (Anzeigen 203a, 205a, 207a). Wie in 2A anschaulich dargestellt, entspricht der Fokus des Benutzers 201a einer Region in der äußersten linken Anzeige (203a). In einem beispielhaften Szenario kann der Fokus des Benutzers 201a während einer ersten Iteration des Vorgangs 100 bestimmt werden. Gemäß Ausführungsformen der beanspruchten Erfindung kann das Leistungsniveau (z.B. Ressourcenverbrauch und/oder Merkmale) der mit dem äußersten linken Anzeigepanel (203a) gekoppelten GPU als Antwort auf eine Bestimmung des aktuellen Fokus des Benutzers dynamisch eingestellt werden. Wie anschaulich dargestellt, wird das Leistungsniveau (durch den nach oben orientierten vertikalen Pfeil angegeben) in der GPU erhöht, die dem äußersten linken Anzeigepanel 203a entspricht. Die Leistungsniveaus (durch den nach unten orientierten vertikalen Pfeil angegeben) der mit den mittleren (205a) und rechten (207a) Anzeigepaneln gekoppelten GPUs können ebenfalls als Antwort auf eine Bestimmung eingestellt werden, dass der aktuelle Fokus des Benutzers bei einem unterschiedlichen Anzeigepanel ist. Gemäß Ausführungsformen, wenn sich der Fokus des Benutzers nicht zwischen Fokusanfragen ändert (z.B. Schritt 101 des Vorgangs 100), können aktuelle Leistungsniveaus beibehalten werden. Wenn der Fokus des Benutzers 201a beispielsweise auf das linke Panel 203a gerichtet bleibt, kann das hohe Leistungsniveau des linken Panels und das niedrige(er) Leistungsniveaus des mittleren und rechten Panels beibehalten werden.
  • Wie in 2B anschaulich dargestellt, entspricht der Fokus des Benutzers 201b nun einer Region in der mittleren Anzeige (205b). In diesem beispielhaften Szenario kann der Fokus des Benutzers 201b durch eine zweite Iteration des Vorgangs 100 bestimmt werden. Gemäß Ausführungsformen der beanspruchten Erfindung wird das Leistungsniveau (z.B. Ressourcenverbrauch und/oder Merkmale) der mit dem mittleren Anzeigepanel (205b) gekoppelten GPU als Antwort auf eine Bestimmung des aktuellen Fokus des Benutzers dynamisch eingestellt. Beispielsweise kann das Leistungsniveau (durch den nach oben orientierten vertikalen Pfeil angegeben) in der GPU erhöht werden, die dem am mittigsten Anzeigepanel 205b entspricht. In diesem beispielhaften Szenario wird das Leistungsniveau (durch den nach unten orientierten vertikalen Pfeil angegeben) der mit dem linken Anzeigepanel (203b) gekoppelten GPU als Antwort auf eine Bestimmung der Änderung des Benutzers im Fokusbereich eingestellt, während das Leistungsniveau der mit dem rechten Anzeigepanel gekoppelten GPU auf einem niedrigen(er) Leistungsniveau bleibt, obwohl eine Änderung zwischen 2a bis 2b nicht erfahren werden kann.
  • Wie in 2C anschaulich dargestellt, entspricht der Fokus des Benutzers 201c nun einer Region in dem rechten Anzeigepanel (207c). In diesem beispielhaften Szenario kann der Fokus des Benutzers 201c durch eine dritte Iteration des Vorgangs 100 bestimmt werden. Gemäß Ausführungsformen der beanspruchten Erfindung wird das Leistungsniveau (z.B. Ressourcenverbrauch und/oder Merkmale) der mit dem mittleren Anzeigepanel (207c) gekoppelten GPU als Antwort auf eine Bestimmung des aktuellen Fokus des Benutzers dynamisch eingestellt. Beispielsweise wird das Leistungsniveau (durch den nach oben orientierten vertikalen Pfeil angegeben) in der GPU erhöht, die dem äußersten rechten Anzeigepanel 2070 entspricht. In diesem beispielhaften Szenario wird das Leistungsniveau (durch den nach unten orientierten vertikalen Pfeil angegeben) der GPU, die mit dem mittleren (2050) Anzeigepanel gekoppelt ist, als Antwort auf eine Bestimmung der Änderung des Benutzers im Fokusbereich eingestellt, während das Leistungsniveau der mit dem linken Anzeigepanel gekoppelten GPU auf einem niedrigen(er) Leistungsniveau bleibt, obwohl eine Änderung in dieser GPU nicht zwischen 2B bis 2C erfahren werden kann.
  • 3A3C stellen beispielhafte graphische Bildschirmausgaben, welche relative Leistungsniveaus basierend auf einem Benutzer-beobachteten Bildschirmbereich angeben, gemäß verschiedener Ausführungsformen der vorliegenden Erfindung anschaulich dar. Wie in 3A3C anschaulich dargestellt, wird eine Drei-Anzeigepanel-Konfiguration in einer horizontalen Orientierung bereitgestellt. In derartigen Ausführungsformen kann jedes der drei Anzeigepanel mit einer graphischen Verarbeitungseinheit in dem gleichen Rechensystem kommunikativ gekoppelt sein und verwendet werden, um eine graphischen Ausgabe von einer oder mehreren Anwendungen gleichzeitig anzuzeigen.
  • Wie in 3A anschaulich dargestellt, befindet sich eine Verfolgungsvorrichtung 301a in der Nähe von drei Anzeigepaneln (Anzeigen 303a, 305a, 307a). In einigen Ausführungsformen kann die Verfolgungsvorrichtung 301a eine drahtlose Empfängervorrichtung umfassen, die ausgelegt ist, um Augenverfolgungsdaten drahtlos von einer von dem Benutzer getragenen optischen Vorrichtung (und beispielsweise von Kameras eingefangen) zu empfangen. Die Verfolgungsvorrichtung 301a kann ferner ausgelegt sein, um die Augenverfolgungsdaten zu verarbeiten, um das Anzeigepanel zu bestimmen, das dem Benutzer-beobachteten Bereich entspricht. Alternativ kann die Verfolgungsvorrichtung 301a ausgelegt sein, um die Daten an den Prozessor des Rechensystems zur Analyse weiterzuleiten. In noch anderen Ausführungsformen kann die Verfolgungsvorrichtung 301a ausgelegt sein, um die gyroskopische Bewegung der optischen Vorrichtung oder die Augen/das Gesicht des Benutzers zu verfolgen und/oder zu analysieren. In noch weiteren Ausführungsformen kann die Verfolgungsvorrichtung 301a ausgelegt sein, um über Bewegungserfassungsvorgänge oder einer von dem Benutzer getragenen optischen Vorrichtung die Bewegung, Position und Orientierung von Gesicht und Augen des Benutzers zu bestimmen.
  • Wie in 3A anschaulich dargestellt, kann der Fokus eines Benutzers (z.B. durch die Verfolgungsvorrichtung 301a) bestimmt werden, um einer Region in der mittleren Anzeige (305a) zu entsprechen. In einem beispielhaften Szenario kann der Fokus des Benutzers während einer ersten Iteration des Vorgangs 100 bestimmt werden. Gemäß Ausführungsformen der beanspruchten Erfindung kann das Leistungsniveau (z.B. Ressourcenverbrauch und/oder Merkmale) der mit dem mittleren Anzeigepanel (305a) gekoppelten GPU als Antwort auf eine Bestimmung des aktuellen Fokus des Benutzers dynamisch eingestellt werden. Wie anschaulich dargestellt, wird das Leistungsniveau (durch die höhere graphische Sättigung) in der GPU erhöht, die dem mittleren Anzeigepanel 305a entspricht. Das Leistungsniveau (durch die niedrigere graphische Sättigung angegeben) der mit den linken (303a) und rechten (307a) Anzeigepaneln gekoppelten GPUs kann ebenfalls als Antwort auf eine Bestimmung eingestellt werden, dass der aktuelle Fokus des Benutzers bei einem unterschiedlichen Anzeigepanel ist. Wie oben mit Bezug auf 2A beschrieben, können aktuelle Leistungsniveaus beibehalten werden, wenn sich der Fokus des Benutzers zwischen Fokusanfragen nicht ändert (z.B. Schritt 101 des Vorgangs 100). Wenn durch die Verfolgungsvorrichtung 301a beispielsweise bestimmt wird, dass der Fokus des Benutzers beispielsweise auf das mittlere Panel 305a in der nächsten Iteration des Vorgangs 100 zu richten ist, kann das hohe Leistungsniveau des mittleren Panels und das niedrige(re) Leistungsniveaus der linken und rechten Panel beibehalten werden.
  • Wie in 3B anschaulich dargestellt, wurde eine Änderung in dem Fokus des Benutzer erfasst (beispielsweise über eine Bestimmung von der Verfolgungsvorrichtung 301b), um dem linken Anzeigepanel 303b zu entsprechen. In diesem beispielhaften Szenario kann der Fokus des Benutzers durch die Verfolgungsvorrichtung 301b während einer zweiten Iteration des Vorgangs 100 bestimmt werden. Gemäß Ausführungsformen der beanspruchten Erfindung wird das Leistungsniveau (z.B. Ressourcenverbrauch und/oder Merkmale) der mit dem linken Anzeigepanel (303b) gekoppelten GPU als Antwort auf eine Bestimmung des aktuellen Fokus des Benutzers dynamisch eingestellt (erhöht). Eine Erhöhung im Leistungsniveau (durch die höhere graphische Sättigung angegeben) wird in der GPU entsprechend dem linken Anzeigepanel 303b erfahren, während in dem rechten Anzeigepanel 307b keine Änderung erfahren werden kann.
  • Gemäß einigen Ausführungsformen kann, um schnelle Änderungen im Benutzer-Fokus zu berücksichtigen, eine Zeitverzögerung für Einstellungen in den GPUs implementiert werden, die mit Anzeigepaneln gekoppelt sind, die nicht dem Anzeigepanel des aktuellen Fokus des Benutzers entsprechen. In diesem beispielhaften Szenario bleibt das Leistungsniveau der GPU, die mit dem bisherigen beobachteten Bereich des Benutzers gekoppelt ist (z.B. dem mittleren Anzeigepanel 305b), auf einem hohen Niveau, nachdem der Fokus des Benutzers (über die Verfolgungsvorrichtung 301b) erfasst wurde, sich in ein unterschiedliches Anzeigepanel 303b geändert zu haben. Das Leistungsniveau kann auf dem hohen Niveau bestehen bleiben, bis eine vorbestimmte Zeitspanne abgelaufen ist und nicht erfasst wurde, dass sich der Fokus des Benutzers zurück zu der mittleren Anzeige während des Zeitablaufs geändert hat. In Ausführungsformen, in denen das Leistungsniveau eines von mehreren diskreten Niveaus umfasst, kann das Leistungsniveau nicht eingestellt (verringert) werden, bis die gesamte Dauer abgelaufen ist. In Ausführungsformen, in denen das Leistungsniveau einem von einem Bereich von Leistungsniveaus entspricht, kann das Leistungsniveau während der vorbestimmten Zeitspanne inkrementell abnehmen, anstatt einen einzigen drastischen Abfall in der Leistung zu erfahren.
  • 3C stellt den Zustand der Leistungsniveaus in den Anzeigepaneln (3030, 305c, 307c) anschaulich dar, nachdem ein vorbestimmter Zeitraum nach einer einzigen Änderung im Benutzer-beobachteten Bildschirmbereich (Fokus) abgelaufen ist. Wie in 3C anschaulich dargestellt, wurde keine Änderung in dem Fokus des Benutzers bestimmt (durch die Verfolgungsvorrichtung 301c). In diesem beispielhaften Szenario wurde der Fokus des Benutzers bestimmt, um in dem Anzeigepanel 303c folgend einer ersten erfassten Änderung des mittleren Anzeigepanels 3050 zu verbleiben (in 3A als 305a anschaulich dargestellt). Das Leistungsniveau der mittleren Anzeige 305c wird eingestellt, sobald die vorbestimmte Zeitdauer der erfassten Änderung im Fokus folgend, abgelaufen ist. Wie durch die (das Fehlen von) graphischer Sättigung angegeben, kann das Leistungsniveau der mittleren Anzeige 3050 entweder durch Deaktivieren bestimmten Merkmale oder Absenken der Ressourcenverbrauchsrate in der mit der mittleren Anzeige 305c gekoppelten GPU verringert werden. Wie in 3C anschaulich dargestellt, kann keine Änderung in dem rechten Anzeigepanel 307b erfahren werden, da keine weitere Änderung in dem Fokus des Benutzers bestimmt wurde.
  • Während 2A2C und 3A3C mit drei Anzeigepaneln in einer horizontalen Konfiguration anschaulich dargestellt wurden, sind Ausführungsformen der vorliegenden Erfindung für veränderliche Anzahlen von Anzeigepaneln und/oder Konfigurationen gut geeignet. In Einzel-Anzeigepanel-Konfigurationen kann die Erfassung für besondere Regionen des Anzeigepanels durchgeführt werden, wobei jede Region durch eine GPU graphisch gerendert wird.
  • BEISPIELHAFTE OPTISCHE VORRICHTUNG
  • 4 stellt eine beispielhafte optische Vorrichtung 400 mit Augenverfolgungsfähigkeit gemäß Ausführungsformen der vorliegenden Erfindung anschaulich dar. In einigen Ausführungsformen kann die graphische Ausgabe, die durch die GPUs gerendert und in den Anzeigevorrichtungen angezeigt wurden (z.B. in 2A3C anschaulich dargestellte Konfigurationen), stereoskopisch, z.B. als eine dreidimensionale Anzeige ausgegeben werden. In derartigen Fällen kann die optische Vorrichtung 400 eine dreidimensionale Brille umfassen. Alternativ kann die optische Vorrichtung 400 als Brille mit Rechen- und/oder Datentransfer-Fähigkeiten implementiert werden. Gemäß einer Ausführungsform kann die optische Vorrichtung 400 verwendet werden, um einen beobachteten Fokusbereich des Benutzers (z.B. in einer von einer Mehrzahl von Anzeigepaneln oder in einer von einer Mehrzahl von Regionen in einem Anzeigepanel zu verfolgen. Wie in 4 anschaulich dargestellt, kann die optische Vorrichtung 400 den beobachteten Fokusbereich des Benutzers durch Verfolgen der Bewegung der Augen des Benutzers über Bildgebungsvorrichtungen (z.B. Kameras 403) verfolgen. Wie gezeigt, können diese Kameras 403 an dem Inneren der optischen Vorrichtung 400 angebracht sein. Alternativ kann die optische Vorrichtung gyroskopische und/oder Bewegungserfassungs-Vorrichtungen (z.B. einen Beschleunigungsmesser) umfassen. Gemäß Ausführungsformen kann die optischen Vorrichtung 400 (beispielsweise über einen drahtlosen Stream) Benutzer-Augenverfolgungsdaten an eine Empfängervorrichtung (z.B. Verfolgungsvorrichtung 301a, 301b, 301c in 3A30) transferieren, die mit dem Rechensystem gekoppelt ist, in dem die GPUs enthalten sind.
  • BEISPIELHAFTES RECHENSYSTEM
  • Wie in 5 dargestellt, umfasst ein beispielhaftes System zum Implementieren von Ausführungsformen eine Allzweck-Rechensystemumgebung, wie beispielsweise ein Rechensystem 600. In seiner grundlegendsten Konfiguration umfasst das Rechensystem 500 typischerweise wenigstens eine Verarbeitungseinheit 501 und Speicher und einen Adressen/Daten-Bus 509 (oder andere Schnittstelle) zum Kommunizieren von Information. Abhängig von der genauen Konfiguration und der Art der Rechensystemumgebung kann der Speicher flüchtig (wie beispielsweise der RAM 502), nichtflüchtig (wie beispielsweise der ROM 503, Flash-Speicher, etc.) oder eine Kombination der beiden sein. Das Computersystem 500 kann ebenfalls ein oder mehrere Graphiksubsysteme 505 umfassen, um dem Computerbenutzer Information z.B. durch Anzeigen von Information auf angeschlossenen Anzeigevorrichtungen 510, die durch eine Mehrzahl von Videokabeln 511 verbunden sind, zu präsentieren. Wie in 5 anschaulich dargestellt, sind drei Graphiksubsysteme 505 einzeln über ein Videokabel 511 mit einer separaten Anzeigevorrichtung 510 gekoppelt. In einer Ausführungsform kann der Vorgang 100 zur dynamischen adaptiven Leistungseinstellung ganz oder teilweise von Graphiksubsystemen 505 durchgeführt und in angeschlossenen Anzeigevorrichtungen 510 angezeigt werden.
  • Außerdem kann das Rechensystem 500 ebenfalls zusätzliche Merkmale/Funktionalität aufweisen. Beispielsweise kann das Rechensystem 500 ebenfalls zusätzlichen (entfernbare und/oder nicht-entfernbare) Speicher umfassen, einschließlich, jedoch nicht beschränkt auf, magnetische oder optische Platten oder Bande. Derartiger zusätzlicher Speicher wird in 5 durch eine Datenspeichervorrichtung 504 veranschaulicht. Computerspeichermedien umfassen flüchtige und nichtflüchtige, entfernbare und nicht-entfernbare Medien, die in irgendeinem Verfahren oder Technologie zur Speicherung von Information, wie beispielsweise computerlesbaren Anweisungen, Datenstrukturen, Programmodulen oder anderen Daten, implementiert sind. Der RAM 502, der ROM 503 und die Datenspeichervorrichtung 504 sind alles Beispiele von Computerspeichermedien.
  • Das Computersystem 500 umfasst ebenfalls eine optionale alphanumerische Eingabevorrichtung 506, eine optionale Cursorsteuerungs- oder Leitvorrichtung 507 und eine oder mehrere Signalkommunikationsschnittstellen (Eingabe/Ausgabe-Vorrichtungen, z.B. eine Netzwerkschnittstellenkarte) 508. Optional kann eine alphanumerische Eingabevorrichtung 506 Information und Befehlsauswahlen zu dem zentralen Prozessor 501 kommunizieren. Die optionale Cursorsteuerung oder Leitvorrichtung 507 ist mit dem Bus 509 zum Kommunizieren von Benutzereingabeinformation und Befehlsauswahlen an den zentralen Prozessor 501 gekoppelt. Eine Signalkommunikationsschnittstelle (Eingabe/Ausgabe-Vorrichtung) 508, die ebenfalls mit dem Bus 509 gekoppelt ist, kann ein serieller Anschluss sein. Die Kommunikationsschnittstelle 509 kann ebenfalls drahtlose Kommunikationsmechanismen umfassen. Unter Verwendung der Kommunikationsschnittstelle 509 kann das Computersystem 500 mit anderen Computersystemen über ein Kommunikationsnetzwerk, wie beispielsweise das Internet oder ein Intranet (z.B. ein Lokalbereichsnetzwerk), kommunikativ gekoppelt sein oder kann Daten (z.B. ein digitales Fernsehsignal) empfangen.
  • Gemäß Ausführungsformen der vorliegenden Erfindung werden neuartige Lösungen und Verfahren zum dynamischen Einstellen einer Merkmalaktivierung und von Leistungsniveaus in graphischen Verarbeitungseinheiten basierend auf einem Benutzer-beobachteten Bildschirmbereich bereitgestellt. Durch dynamisches Einstellen von Merkmalen und Leistungsniveaus in graphischen Verarbeitungseinheiten, die eine graphische Ausgabe zur Anzeige an Anzeigepaneln rendern, die dem aktuellen Bereich des Fokus des Benutzers nicht entsprechen, können Ressourcenverbrauch und nachteilige Nebenwirkungen von hohen Verarbeitungsniveaus, wie beispielsweise Geräusche und Wärme, mit kleiner oder keiner schädlichen Auswirkung auf das Betrachtungserlebnis des Benutzers erheblich verringert werden.
  • In der vorangehenden Spezifikation wurden Ausführungsformen mit Bezug auf zahlreiche spezifische Details beschrieben, welche von Implementierung zu Implementierung variieren können. Somit ist der einzige und ausschließliche Indikator, was die Erfindung ist und was von dem Anmelder die Erfindung zu sein beabsichtigt ist, der Satz von Ansprüchen, welche von dieser Anmeldung ausgegeben wird, in der spezifischen Form, in welcher solche Ansprüche ausgegeben werden, einschließlich irgendeiner nachfolgenden Korrektur. Somit sollte keine Begrenzung, Element, Eigenschaft, Merkmal, Vorteil oder Attribut, welches nicht explizit in einem Anspruch aufgeführt ist, den Geltungsbereich eines solchen Anspruches in irgendeiner Weise beschränken. Demgemäß sind die Spezifikation und die Zeichnungen als illustrativ anstatt in einem beschränkenden Sinne zu betrachten.

Claims (15)

  1. System, umfassend: eine Mehrzahl von Anzeigepaneln; eine Mehrzahl von graphischen Verarbeitungseinheiten (GPUs), die mit der Mehrzahl von Anzeigepaneln gekoppelt und ausgelegt sind, um eine graphischen Ausgabe zu rendern, um auf der Mehrzahl von Anzeigepaneln anzuzeigen; einen Mechanismus, der betreibbar ist, um einen visuellen Fokuspunkt eines Benutzer zu bestimmen, wobei der visuelle Fokuspunkt einer Position in einem ersten Anzeigepanel in der Mehrzahl von Anzeigepaneln entspricht; und wobei eine Mehrzahl von Leistungsniveaus, die der Mehrzahl von GPUs entspricht, basierend auf der Position des visuellen Fokuspunkts der Benutzer dynamisch eingestellt wird.
  2. System gemäß Anspruch 1, wobei ein Leistungsniveau der mit dem ersten Anzeigepanel gekoppelten GPU erhöht wird, während der visuellen Fokuspunkt des Benutzers einer Position in dem ersten Anzeigepanel entspricht.
  3. System gemäß Anspruch 2, wobei eine Leistungsverbrauchsrate der mit dem ersten Anzeigepanel gekoppelten GPU erhöht wird, wenn das Leistungsniveau der GPU erhöht wird.
  4. System gemäß Anspruch 1, wobei Leistungsniveaus der nicht mit dem ersten Anzeigepanel gekoppelten GPUs dynamisch verringert werden, während der visuelle Fokuspunkt des Benutzers einer Position in dem ersten Anzeigepanel entspricht.
  5. System gemäß Anspruch 4, wobei Leistungsverbrauchsraten der nicht mit dem ersten Anzeigepanel gekoppelten GPUs verringert werden, wenn das Leistungsniveau der mit dem ersten Anzeigepanel gekoppelten GPU erhöht wird.
  6. System gemäß Anspruch 1, wobei der Mechanismus eine Mehrzahl von Kameravorrichtungen umfasst.
  7. System gemäß Anspruch 6, wobei die Mehrzahl von Kameravorrichtungen betreibbar ist, um eine Augenbewegung des Benutzers kontinuierlich zu verfolgen, um den visuellen Fokus des Benutzers zu bestimmen.
  8. System gemäß Anspruch 6, ferner umfassend eine optische Vorrichtung, die betreibbar ist, um von dem Benutzer getragen zu werden, wobei die Mehrzahl von Kameravorrichtungen auf der optischen Vorrichtung angeordnet ist.
  9. System gemäß Anspruch 8, wobei die optische Vorrichtung eine Brille umfasst.
  10. System gemäß Anspruch 9, wobei der Mechanismus betreibbar ist, um eine gyroskopische Bestimmung einer Orientierung der optischen Vorrichtung relativ zu der Mehrzahl von Anzeigepaneln durchzuführen.
  11. System gemäß Anspruch 1, wobei die Mehrzahl von Leistungsniveaus, welche der Mehrzahl von GPUs entspricht, als Antwort auf eine Änderung in der Position des visuellen Fokuspunkts des Benutzers dynamisch eingestellt wird.
  12. Verfahren, umfassend: Bestimmen, in einer Mehrzahl von Anzeigen, eine Blickrichtung eines Betrachters; Bestimmen, dass der visuelle Fokus des Betrachters einer ersten Anzeige der Mehrzahl von Anzeigen entspricht; dynamisches Erhöhen eines Leistungsniveaus einer ersten graphischen Verarbeitungseinheit (GPU) als Antwort auf das Bestimmen, dass der visuelle Fokus des Betrachters der ersten Anzeige entspricht, wobei die dynamische Erhöhung beibehalten wird, während der visuelle Fokus des Betrachters der ersten Anzeige entspricht, wobei die erste graphische Verarbeitungseinheit verwendet wird, um die in der ersten Anzeige angezeigte graphischen Ausgabe zu rendern; und dynamisches Vermindern eines Leistungsniveaus in wenigstens einer GPU als Antwort auf das dynamische Erhöhen des Leistungsniveaus der ersten GPU, wobei die wenigstens eine GPU mit wenigstens einer Anzeige der Mehrzahl von Anzeigen gekoppelt ist, die nicht die erste Anzeige ist und verwendet wird, um die in der wenigstens einen Anzeige angezeigte graphische Ausgabe zu rendern.
  13. Verfahren gemäß Anspruch 12, ferner umfassend: Erfassen einer Änderung in dem visuellen Fokus des Betrachters; Bestimmen, dass die Änderung in dem visuellen Fokus des Betrachters einer zweiten Anzeige der Mehrzahl von Anzeigen entspricht, wobei die zweite Anzeige eine unterschiedliche Anzeige als die erste Anzeige umfasst; dynamisches Erhöhen eines Leistungsniveaus einer zweiten GPU als Antwort auf das Bestimmen, dass die Änderung in dem visuellen Fokus des Betrachters der zweiten Anzeige entspricht, während der visuelle Fokus des Betrachters der zweiten Anzeige entspricht, wobei die zweite GPU mit der zweiten Anzeige gekoppelt ist und verwendet wird, um die in der zweiten Anzeige angezeigte graphische Ausgabe zu rendern; und dynamisches Verringern des Leistungsniveaus der ersten GPU als Antwort auf das dynamische Erhöhen des Leistungsniveaus der zweiten GPU.
  14. Verfahren gemäß Anspruch 12, wobei das dynamische Verringern des Leistungsniveaus der ersten GPU nach einem vorbestimmten Zeitraum folgend dem Bestimmen der Änderung in dem visuellen Fokus des Betrachters durchgeführt wird.
  15. Verfahren gemäß Anspruch 12, wobei das Bestimmen des visuellen Fokus des Betrachters ein Durchführen wenigstens eines der folgenden umfasst: Abtasten der Position der Augen des Betrachters über eine Mehrzahl von Kameravorrichtungen, die in einer von dem Betrachter getragenen optischen Vorrichtung umfasst ist; Abtasten der Position der Augen des Betrachters über eine Kameravorrichtung, die nahe zu wenigstens einem Panel der Mehrzahl von Anzeigepaneln angeordnet ist; und gyroskopisches Bestimmen einer Orientierung einer von dem Benutzer getragenen optischen Vorrichtung relativ zu der Mehrzahl von Anzeigen.
DE112014003669.2T 2013-08-09 2014-08-06 Dynamische GPU-Merkmaleinstellung basierend auf Benutzer-beobachteten Bildschirmbereich Withdrawn DE112014003669T5 (de)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/963,523 US20150042553A1 (en) 2013-08-09 2013-08-09 Dynamic gpu feature adjustment based on user-observed screen area
US13/963,523 2013-08-09
PCT/US2014/049963 WO2015021170A1 (en) 2013-08-09 2014-08-06 Dynamic gpu feature adjustment based on user-observed screen area

Publications (1)

Publication Number Publication Date
DE112014003669T5 true DE112014003669T5 (de) 2016-05-12

Family

ID=52448178

Family Applications (1)

Application Number Title Priority Date Filing Date
DE112014003669.2T Withdrawn DE112014003669T5 (de) 2013-08-09 2014-08-06 Dynamische GPU-Merkmaleinstellung basierend auf Benutzer-beobachteten Bildschirmbereich

Country Status (4)

Country Link
US (1) US20150042553A1 (de)
CN (1) CN105408838A (de)
DE (1) DE112014003669T5 (de)
WO (1) WO2015021170A1 (de)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9367117B2 (en) 2013-08-29 2016-06-14 Sony Interactive Entertainment America Llc Attention-based rendering and fidelity
JP6578901B2 (ja) * 2015-11-13 2019-09-25 株式会社デンソー 表示制御装置
CN106095375B (zh) * 2016-06-27 2021-07-16 联想(北京)有限公司 显示控制方法和装置
US10410313B2 (en) 2016-08-05 2019-09-10 Qualcomm Incorporated Dynamic foveation adjustment
CN106412563A (zh) * 2016-09-30 2017-02-15 珠海市魅族科技有限公司 一种图像显示方法以及装置
CN106485790A (zh) * 2016-09-30 2017-03-08 珠海市魅族科技有限公司 一种画面显示的方法以及装置
CN106652972B (zh) * 2017-01-03 2020-06-05 京东方科技集团股份有限公司 显示屏的处理电路、显示方法及显示器件
US10152822B2 (en) 2017-04-01 2018-12-11 Intel Corporation Motion biased foveated renderer
US11475636B2 (en) 2017-10-31 2022-10-18 Vmware, Inc. Augmented reality and virtual reality engine for virtual desktop infrastucture
US10621768B2 (en) * 2018-01-09 2020-04-14 Vmware, Inc. Augmented reality and virtual reality engine at the object level for virtual desktop infrastucture
CN108469893B (zh) * 2018-03-09 2021-08-27 海尔优家智能科技(北京)有限公司 显示屏的控制方法、装置、设备及计算机可读存储介质
CN111857336B (zh) * 2020-07-10 2022-03-25 歌尔科技有限公司 头戴式设备及其渲染方法、存储介质
CN117241447B (zh) * 2023-11-14 2024-03-05 深圳市创先照明科技有限公司 灯光控制方法、装置、电子设备及计算机可读存储介质

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9223426B2 (en) * 2010-10-01 2015-12-29 Z124 Repositioning windows in the pop-up window
US7502947B2 (en) * 2004-12-03 2009-03-10 Hewlett-Packard Development Company, L.P. System and method of controlling a graphics controller
US7698579B2 (en) * 2006-08-03 2010-04-13 Apple Inc. Multiplexed graphics architecture for graphics power management
US8570331B1 (en) * 2006-08-24 2013-10-29 Nvidia Corporation System, method, and computer program product for policy-based routing of objects in a multi-graphics processor environment
US8225229B2 (en) * 2006-11-09 2012-07-17 Sony Mobile Communications Ab Adjusting display brightness and/or refresh rates based on eye tracking
US9524138B2 (en) * 2009-12-29 2016-12-20 Nvidia Corporation Load balancing in a system with multi-graphics processors and multi-display systems
US8477425B2 (en) * 2010-02-28 2013-07-02 Osterhout Group, Inc. See-through near-eye display glasses including a partially reflective, partially transmitting optical element
US9299311B2 (en) * 2010-05-28 2016-03-29 Hewlett Packard Enterprise Development Lp Disabling a display refresh process
US8510166B2 (en) * 2011-05-11 2013-08-13 Google Inc. Gaze tracking system
US8806235B2 (en) * 2011-06-14 2014-08-12 International Business Machines Corporation Display management for multi-screen computing environments
US9829970B2 (en) * 2011-06-27 2017-11-28 International Business Machines Corporation System for switching displays based on the viewing direction of a user
US8692833B2 (en) * 2011-08-09 2014-04-08 Apple Inc. Low-power GPU states for reducing power consumption
US20140347363A1 (en) * 2013-05-22 2014-11-27 Nikos Kaburlasos Localized Graphics Processing Based on User Interest

Also Published As

Publication number Publication date
US20150042553A1 (en) 2015-02-12
CN105408838A (zh) 2016-03-16
WO2015021170A1 (en) 2015-02-12

Similar Documents

Publication Publication Date Title
DE112014003669T5 (de) Dynamische GPU-Merkmaleinstellung basierend auf Benutzer-beobachteten Bildschirmbereich
DE102015108057B4 (de) Aktualisierungsabhängiges adaptives Dithering für ein Display mit variabler Aktualisierungsrate
DE102015108424B4 (de) Dynamische Frame-Wiederholung in einem Variable-Wiederauffrischungs-Rate-System
DE112016001524T5 (de) Informationsverarbeitungseinrichtung, Informationsverarbeitungsverfahren und Programm
DE102013113542B4 (de) Autostereoskopische Mehrfachbetrachtungsanzeige und Verfahren zum Steuern optimaler Betrachtungsabstände derselben
DE102020201787A1 (de) Erzeugen von blickkorrigierten bildern unter verwendung eines bidirektional trainierten netzwerks
DE102004062529B4 (de) Verfahren und Vorrichtung zum Treiben einer Flüssigkristallanzeigevorrichtung
DE19807028C2 (de) Synchronisation für das Rahmenpufferaustauschen in Multipipeline-Computergraphikanzeigesystemen
DE102013020808A1 (de) Effiziente Autostereo-Unterstützung unter Verwendung von Anzeigesteuerungsfenster
DE112016005343T5 (de) Elektronische Anzeigestabilisierung unter Verwendung von Pixelgeschwindigkeiten
DE102018123048A1 (de) Dreidimensionale brillenfreie Lichtfeldanzeigevorrichtung mit Augenposition
DE102013021708A1 (de) Flüssigkristallanzeige mit geringer bewegungsunschärfe
Finlayson et al. Visual search is influenced by 3D spatial layout
DE102015122767A1 (de) Betätigung eines gerätes zum betrachten von ersten inhaltsframes, die auf einer anzeige zwischen zweiten inhaltsframes dargestellt werden
DE102014113704A1 (de) Informationsverarbeitungseinrichtung und Informationsverarbeitungsverfahren
Mackin et al. The visibility of motion artifacts and their effect on motion quality
DE102011080776A1 (de) System, Verfahren und Computerprogrammprodukt zum Aktivieren einer Hintergrundbeleuchtung eines Anzeigengeräts, welches stereoskopischenAnzeigeinhalt anzeigt
CN102186094B (zh) 一种媒体文件的播放方法及装置
DE102014206914A1 (de) Ein stereoskopisches Aufbereitungssystem
DE102011054756A1 (de) Anzeigetreiberschaltung, Betriebsverfahren hierfür und Vorrichtung für einen Benutzer, welche dieselbe aufweist
DE112010005619T5 (de) Dreidimensionale Bilderzeugung
DE112013007092T5 (de) Bildsynthetisiervorrichtung und Verfahren
DE102016113792B4 (de) Steuervorrichtung und Steuerverfahren
DE102015110882A1 (de) Einstellverfahren und Elektronikgerät
EP1680929B1 (de) Ansteuerung zur stereoprojektion

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R119 Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee