DE112018005954T5 - Informationsverarbeitungsvorrichtung, informationsverarbeitungsverfahren und computerprogramm - Google Patents

Informationsverarbeitungsvorrichtung, informationsverarbeitungsverfahren und computerprogramm Download PDF

Info

Publication number
DE112018005954T5
DE112018005954T5 DE112018005954.5T DE112018005954T DE112018005954T5 DE 112018005954 T5 DE112018005954 T5 DE 112018005954T5 DE 112018005954 T DE112018005954 T DE 112018005954T DE 112018005954 T5 DE112018005954 T5 DE 112018005954T5
Authority
DE
Germany
Prior art keywords
information
user
dimensional image
information processing
sight
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE112018005954.5T
Other languages
English (en)
Inventor
Yuhei Taki
Soichiro INATANI
Hiro Iwase
Ikuo Yamano
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of DE112018005954T5 publication Critical patent/DE112018005954T5/de
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G09G3/003—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to produce spatial visual effects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/167—Synchronising or controlling image signals
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/02—Improving the quality of display appearance
    • G09G2320/0261—Improving the quality of display appearance in the context of movement of objects on the screen or movement of the observer relative to the screen
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00—Specific applications
    • G09G2380/10—Automotive applications

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Optics & Photonics (AREA)
  • Computer Hardware Design (AREA)
  • Information Transfer Between Computers (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

Eine Informationsverarbeitungsvorrichtung, ein Informationsverarbeitungsverfahren und ein Programm werden bereitgestellt, die es ermöglichen, den Komfort zu verbessern, wenn mehrere Benutzer dreidimensionale Bilder gemeinsam nutzen und durch diese browsen. Die Informationsverarbeitungsvorrichtung ist mit einer Steuereinheit versehen, die Steuerung durchführt zum Bestimmen eines Übertragungsstartpunkts von dreidimensionalen Bildinformationen basierend auf Positionsinformationen und Sichtlinieninformationen eines ersten Benutzers, Positionsinformationen und Sichtlinieninformationen eines zweiten Benutzers und zum Anzeigen von Positionsinformationen der dreidimensionalen Bildinformationen, die vom ersten Benutzer und vom zweiten Benutzer gemeinsam genutzt und betrachtet werden.

Description

  • Technisches Gebiet
  • Die vorliegende Offenbarung betrifft eine Informationsverarbeitungsvorrichtung, ein Informationsverarbeitungsverfahren und ein Computerprogramm.
  • Hintergrund
  • In den letzten Jahren wurden aufgrund der Entwicklung von Informationsverarbeitungstechniken und Kommunikationstechniken Augmented-Reality(AR)- und Virtual-Reality(VR)-Umgebungen entwickelt, in denen Personen eine reale körperliche Empfindung einer virtuellen Welt erfahren können.
  • Beispielsweise offenbart die folgende Patentliteratur 1 eine Technik, die sich auf das bezieht, was als AR bezeichnet wird, um ein Anzeigeobjekt einem realen Raum zu überlagern und anzuzeigen, der über eine transmittierende kopfmontierte Anzeige (HMD) betrachtet werden kann.
  • Referenzliste
  • Patentliteratur
  • Patentliteratur 1: JP 2017-120550 A
  • Kurzfassung
  • Technisches Problem
  • Wenn man allerdings versucht, ein massives 3D-Modell mit hoher Auflösung oder mit einer Animation anzuzeigen, kann das Herunterladen von Modelldaten nicht mit der Betrachtung Schritt halten, und es wird eine lange Wartezeit erzeugt, sodass es schwierig ist, eine komfortable Betrachtung vorzunehmen. Insbesondere bei der gleichzeitigen Betrachtung eines gemeinsamen 3D-Modells (dreidimensionales Bild) durch mehrere Benutzer wird freie Kommunikation in Bezug auf das 3D-Modell während der Wartezeit für den Download behindert.
  • Somit stellt die vorliegende Offenbarung eine Informationsverarbeitungsvorrichtung, ein Informationsverarbeitungsverfahren und ein Computerprogramm bereit, die den Komfort zu dem Zeitpunkt verbessern können, wenn sich mehrere Benutzer ein dreidimensionales Bild teilen und betrachten.
  • Lösung für das Problem
  • Gemäß der vorliegenden Offenbarung wird eine Informationsverarbeitungsvorrichtung bereitgestellt, die Folgendes umfasst: eine Steuereinheit, die ausgelegt ist zum Durchführen von Steuerung zum Bestimmen eines Übertragungsstartpunkts von dreidimensionalen Bildinformationen basierend auf Positionsinformationen und Sichtlinieninformationen eines ersten Benutzers, Positionsinformationen und Sichtlinieninformationen eines zweiten Benutzers und Anzeigen von Positionsinformationen der dreidimensionalen Bildinformationen, die vom ersten Benutzer und vom zweiten Benutzer gemeinsam genutzt und betrachtet werden.
  • Gemäß der vorliegenden Offenbarung wird ein von einem Prozessor durchgeführtes Informationsverarbeitungsverfahren bereitgestellt, das Folgendes umfasst: Durchführen von Steuerung zum Bestimmen eines Übertragungsstartpunkts von dreidimensionalen Bildinformationen basierend auf Positionsinformationen und Sichtlinieninformationen eines ersten Benutzers, Positionsinformationen und Sichtlinieninformationen eines zweiten Benutzers und Anzeigen von Positionsinformationen der dreidimensionalen Bildinformationen, die vom ersten Benutzer und vom zweiten Benutzer gemeinsam genutzt und betrachtet werden.
  • Gemäß der vorliegenden Offenbarung wird ein Computerprogramm bereitgestellt, das einen Computer veranlasst, als eine Steuereinheit zu fungieren, die ausgelegt ist zum Durchführen von Steuerung zum Bestimmen eines Übertragungsstartpunkts von dreidimensionalen Bildinformationen basierend auf Positionsinformationen und Sichtlinieninformationen eines ersten Benutzers, Positionsinformationen und Sichtlinieninformationen eines zweiten Benutzers und Anzeigen von Positionsinformationen der dreidimensionalen Bildinformationen, die vom ersten Benutzer und vom zweiten Benutzer gemeinsam genutzt und betrachtet werden.
  • Vorteilhafte Auswirkungen der Erfindung
  • Wie oben beschrieben, ist es gemäß der vorliegenden Offenbarung möglich, die Annehmlichkeit zu dem Zeitpunkt zu verbessern, zu dem mehrere Benutzer ein dreidimensionales Bild gemeinsam nutzen und betrachten.
  • Die oben beschriebenen Auswirkungen sind nicht notwendigerweise einschränkend, und jegliche der in der vorliegenden Beschreibung beschriebenen Auswirkungen oder eine andere Auswirkung, die anhand der vorliegenden Beschreibung begriffen werden kann, kann zusätzlich zu oder anstelle der oben beschriebenen Auswirkungen aufgezeigt werden.
  • Figurenliste
    • 1 ist ein Diagramm zum Erläutern einer Übersicht für ein Informationsverarbeitungssystem gemäß einer Ausführungsform der vorliegenden Offenbarung.
    • 2 ist ein Blockdiagramm, das ein Beispiel einer Hardwareausgestaltung eines Informationsverarbeitungsendgeräts gemäß der vorliegenden Ausführungsform veranschaulicht.
    • 3 ist ein Blockdiagramm, das ein Beispiel für eine logische Ausgestaltung eines Servers gemäß der vorliegenden Ausführungsform veranschaulicht.
    • 4 ist ein Diagramm zum Erläutern einer Übersicht eines ersten Bestimmungsverfahrens für einen Download-Startpunkt gemäß der vorliegenden Ausführungsform.
    • 5 ist ein Diagramm zum Erläutern von Größenumrissinformationen von 3D-Modelldaten gemäß der vorliegenden Ausführungsform.
    • 6 ist ein Diagramm zum Erläutern der Bestimmung des Download-Startpunkts unter Bezugnahme auf eine Größenumrissfigur und einen Referenzpunkt in dem ersten Bestimmungsverfahren für den Download-Startpunkt gemäß der vorliegenden Ausführungsform.
    • 7 ist ein Diagramm zur Erläuterung eines Falls, in dem eine große Anzahl von startbaren Download-Punkten auf den 3D-Modelldaten in einem zweiten Bestimmungsverfahren für den Download-Startpunkt angeordnet ist, gemäß der vorliegenden Ausführungsform.
    • 8 ist ein Diagramm zur Erläuterung der Bestimmung des Download-Startpunkts unter Bezugnahme auf einen startbaren Download-Punkt in der zweiten Bestimmungsmethode für den Download-Startpunkt.
    • 9 ist ein Diagramm zum Erläutern der Bestimmung einer Download-Fortschrittsrichtung unter Verwendung des startbaren Download-Punkts gemäß der vorliegenden Ausführungsform.
    • 10 ist ein Diagramm zum Erläutern der Bestimmung der Download-Fortschrittsrichtung unter Verwendung eines Hochfrequenz-Anblickpunkts gemäß der vorliegenden Ausführungsform.
    • 11 ist ein Diagramm zur Erläuterung der Bestimmung von mehreren Download-Startpunkten gemäß der vorliegenden Ausführungsform.
    • 12 ist ein Ablaufdiagramm, das eine Verarbeitungsprozedur des Informationsverarbeitungssystems gemäß der vorliegenden Ausführungsform darstellt.
    • 13 ist ein Blockdiagramm, das ein Hardwareausgestaltungsbeispiel einer Informationsverarbeitungsvorrichtung gemäß einer Ausführungsform der vorliegenden Offenbarung darstellt.
  • Beschreibung der Ausführungsformen
  • Das Folgende beschreibt eine bevorzugte Ausführungsform der vorliegenden Offenbarung im Detail unter Bezugnahme auf die beigefügten Zeichnungen. In der vorliegenden Beschreibung und den Zeichnungen werden Bestandteile mit im wesentlichen derselben Funktionskonfiguration mit denselben Referenznummern bezeichnet, und eine redundante Beschreibung wird nicht wiederholt.
  • Die Beschreibung erfolgt in der folgenden Reihenfolge.
    1. 1. Abriss eines Informationsverarbeitungssystems gemäß einer Ausführungsform der vorliegenden Offenbarung
    2. 2. Ausgestaltung
      • 2-1. Ausgestaltung des Informationsverarbeitungsendgeräts 1
      • 2-2. Ausgestaltung des Servers 2
    3. 3. Bedienungsverarbeitung
    4. 4. Hardwareausgestaltung
    5. 5. Schlussfolgerung
  • Abriss eines Informationsverarbeitungssystems gemäß einer Ausführungsform der vorliegenden Offenbarung
  • 1 ist ein Diagramm zum Erläutern einer Übersicht für ein Informationsverarbeitungssystem gemäß einer Ausführungsform der vorliegenden Offenbarung. Wie in 1 veranschaulicht ist, beinhaltet das Informationsverarbeitungssystem gemäß der vorliegenden Ausführungsform einen Server 2, ein Informationsverarbeitungsendgerät 1A und ein Informationsverarbeitungsendgerät 1B.
  • Das Informationsverarbeitungsendgerät 1 ist ein sogenanntes Augmented Reality(AR)-Endgerät, insbesondere beispielsweise ein tragbares Gerät von der Art einer Brille, das eine Steuerung zum Anzeigen eines virtuellen Objekts auf einer transmittierenden Anzeigeeinheit ausführt, so dass es einem realen Raum überlagert zu sein scheint, um Augmented Reality (erweiterte Realität) zu implementieren.
  • Hintergrund
  • Es wird ein Fall angenommen, in dem ein Benutzer A, der das Informationsverarbeitungsendgerät 1A trägt, und ein Benutzer B, der das Informationsverarbeitungsendgerät 1B trägt, in demselben Raum vorhanden sind und dasselbe virtuelle Objekt basierend auf den vom Server 2 empfangenen Daten gemeinsam nutzen und betrachten. In einem Fall, in dem mehrere Benutzer gleichzeitig ein gemeinsames virtuelles Objekt betrachten und an einem aktuellen Ort miteinander kommunizieren, entsteht eine Wartezeit, wenn das Herunterladen von Daten einige Zeit in Anspruch nimmt, und die freie Kommunikation zwischen den Benutzern verhindert wird.
  • Insbesondere bei der Anzeige von 3D-Modelldaten (dreidimensionale Bildinformationen) und dergleichen, bei denen es sich im Vergleich zu 2D-Daten um Daten mit höherer Auflösung und größerem Volumen handelt, ist eine Datenmenge sehr groß, so dass bewirkt wird, dass der Benutzer mit einem Verfahren zum einfachen Anzeigen der Daten, nachdem die gesamten Daten vollständig vom Server 2 heruntergeladen wurden, lange Zeit warten muss und die Komfort-AR-Erfahrung beeinträchtigt werden kann.
  • Somit wird in der vorliegenden Ausführungsform durch Bestimmen eines Download-Startpunkts, so dass ein Teil, der von den Benutzern betrachtet werden kann, bevorzugt basierend auf Positionen und Sichtlinienrichtungen der Benutzer heruntergeladen wird, die Wartezeit reduziert, um ein bequemes Betrachten zu ermöglichen, ohne einen Unterschied von Betrachtungszuständen der Benutzer zu verursachen, und es wird ermöglicht, das Betrachtungserlebnis zu verbessern. Die Benutzer können sofort beginnen, über einen gemeinsamen Teil, dessen Betrachten von ihnen selbst begonnen wird, frei miteinander zu kommunizieren.
  • Das Informationsverarbeitungssystem gemäß einer Ausführungsform der vorliegenden Offenbarung wurde oben beschrieben. Das Folgende beschreibt eine spezifische Ausgestaltung jeder Vorrichtung, die in dem Informationsverarbeitungssystem gemäß der vorliegenden Ausführungsform enthalten ist, unter Bezugnahme auf die Zeichnungen.
  • Ausgestaltung
  • Ausgestaltung des Informationsverarbeitungsendgeräts 1
  • 2 ist ein Blockdiagramm, das ein Beispiel für eine Ausgestaltung des Informationsverarbeitungsendgeräts 1 gemäß der vorliegenden Ausführungsform veranschaulicht. Wie in 2 veranschaulicht, beinhaltet das Informationsverarbeitungsendgerät 1 eine Sensoreinheit 11, eine Steuereinheit 12, eine Anzeigeeinheit 13, einen Lautsprecher 14, eine Kommunikationseinheit 15, eine Betriebseingabeeinheit 16 und eine Speichereinheit 17.
  • Sensoreinheit 11
  • Die Sensoreinheit 11 hat die Funktion, verschiedene Arten von Informationen über den Benutzer oder eine periphere Umgebung zu erfassen. Beispielsweise umfasst die Sensoreinheit 11 eine Außenkamera 110, eine Innenkamera 111, ein Mikrofon 112, einen Kreiselsensor 113, einen Beschleunigungssensor 114, einen Azimutsensor 115, eine Positionsmesseinheit 116 und einen Biosensor 117. Ein spezifisches Beispiel der hier beschriebenen Sensoreinheit 11 ist lediglich ein Beispiel, und die vorliegende Ausführungsform ist nicht darauf beschränkt. Die Anzahl der jeweiligen Sensoren kann mehrere sein.
  • Das spezifische Beispiel der Sensoreinheit 11, das in 2 veranschaulicht ist, ist als bevorzugtes Beispiel beispielhaft dargestellt, aber nicht alle Komponenten davon sind notwendigerweise dargestellt. Beispielsweise kann die Sensoreinheit 11 eine Ausgestaltung aufweisen, die einen Teil des in 2 veranschaulichten spezifischen Beispiels der Sensoreinheit 11 enthält, wie etwa eine Ausgestaltung, die nur die Außenkamera 110, den Beschleunigungssensor 114 und die Positionsmesseinheit 116 enthält, oder kann ferner einen anderen Sensor enthalten.
  • Jede der Außenkamera 110 und der Innenkamera 111 umfasst ein Linsensystem, das aus einer Abbildungslinse, einer Blende, einem Zoomobjektiv, einem Fokusobjektiv und dergleichen besteht, ein Antriebssystem, das bewirkt, dass das Linsensystem eine Fokusoperation und eine Zoomoperation ausführt , ein Festkörper-Bildgebungselement-Array, das eine photoelektrische Umwandlung von Abbildungslicht durchführt, das von dem Linsensystem erhalten wird, um ein Bildgebungssignal und dergleichen zu erzeugen. Das Festkörper-Bildgebungselement-Array kann beispielsweise durch ein Charge-Coupled-Device(CCD)-Sensorarray oder ein Complementary-Metal-Oxide-Semiconductor(CMOS)-Sensorarray implementiert sein.
  • Bei der vorliegenden Ausführungsform sind ein Betrachtungswinkel und eine Orientierung der Außenkamera 110 bevorzugt so eingestellt, dass sie einen Bereich abbilden, der einem Sichtfeld des Benutzers im realen Raum entspricht.
  • Das Mikrofon 112 sammelt eine Stimme des Benutzers und einen umgebenden Umweltschall, der als Sprachdaten an die Steuereinheit 12 ausgegeben werden soll.
  • Der Kreiselsensor 113 wird beispielsweise von einem dreiachsigen Kreiselsensor implementiert und detektiert eine Winkelgeschwindigkeit (Drehzahl).
  • Der Beschleunigungssensor 114 wird beispielsweise von einem dreiachsigen Beschleunigungssensor (auch als G-Sensor bezeichnet) implementiert und detektiert die Beschleunigung zum Zeitpunkt der Bewegung.
  • Der Azimutsensor 115 wird beispielsweise von einem dreiachsigen geomagnetischen Sensor (Kompass) implementiert und detektiert eine absolute Richtung (Azimut).
  • Die Positionsmesseinheit 116 hat die Funktion, eine aktuelle Position des Informationsverarbeitungsendgeräts 1 basierend auf einem von außen erfassten Signal zu detektieren. Insbesondere wird beispielsweise die Positionsmesseinheit 116 von einer GPS-Messeinheit (Global Positioning System) implementiert und empfängt Funkwellen von GPS-Satelliten, detektiert eine Position, an der das Informationsverarbeitungsendgerät 1 vorhanden ist, und gibt die detektierten Positionsinformationen an die Steuereinheit 12 aus. Die Positionsmesseinheit 116 kann die Position auch über Wi-Fi (eingetragene Marke), Bluetooth (eingetragene Marke), Sendung/Empfang zu/von einem Mobiltelefon, einem PHS, einem Smartphone und dergleichen, Nahbereichskommunikation oder dergleichen beispielsweise zusätzlich zum GPS detektieren.
  • Der Biosensor 117 detektiert biologische Informationen über den Benutzer. Insbesondere kann der Biosensor 117 beispielsweise einen Herzschlag, eine Körpertemperatur, Schwitzen, einen Blutdruck, Schwitzen, einen Puls, Atmung, Niktitation, eine Augenbewegung, eine Anblickzeit, eine Größe des Pupillendurchmessers, einen Blutdruck, Gehirnwellen, eine Körperbewegung, eine Haltung, eine Hauttemperatur, elektrischer Hautwiderstand, Mikrovibration (MV), myoelektrisches Potential, Blutsauerstoffsättigung (SPO2) oder dergleichen detektieren.
  • Steuereinheit 12
  • Die Steuereinheit 12 fungiert als eine arithmetische Verarbeitungseinheit und eine Steuervorrichtung und steuert die gesamten Operationen in dem Informationsverarbeitungsendgerät 1 gemäß verschiedenen Computerprogrammen. Die Steuereinheit 12 kann beispielsweise durch eine elektronische Schaltung, wie eine Zentraleinheit (CPU) und ein Mikroprozessor, implementiert sein. Die Steuereinheit 12 kann auch einen Nurlesespeicher (ROM) enthalten, der ein zu verwendendes Computerprogramm, einen arithmetischen Parameter und dergleichen speichert, und einen Direktzugriffsspeicher (RAM), der vorübergehend einen Parameter und dergleichen speichert, der geeignet variiert.
  • Die Steuereinheit 12 gemäß der vorliegenden Ausführungsform steuert beispielsweise das Starten oder Stoppen jeder Ausgestaltung. Die Steuereinheit 12 kann auch ein Steuersignal an die Anzeigeeinheit 13 und den Lautsprecher 14 eingeben. Wie in 2 veranschaulicht ist, kann die Steuereinheit 12 gemäß der vorliegenden Ausführungsform auch als eine Sichtliniendetektionseinheit 120, eine Selbstpositionsspezifikationseinheit 122, eine Gemeinsamnutzung-Steuereinheit 124 und eine Anzeigeverarbeitungseinheit 126 fungieren.
  • Die Sichtliniendetektionseinheit 120 erfasst Sichtlinieninformationen des Benutzers basierend auf Sensordaten, die von der Sensoreinheit 11 erfasst werden. Insbesondere analysiert beispielsweise die Sichtliniendetektionseinheit 120 die Orientierung eines Gesichts des Benutzers oder eine Anblickposition basierend auf den von der Außenkamera 110, der Innenkamera 111, dem Kreiselsensor 113, dem Beschleunigungssensor 114 oder dem Azimutsensor 115, der in der Sensoreinheit 11 enthalten ist, erfassten Sensordaten und detektiert die Sichtlinienrichtung des Benutzers als die Sichtlinieninformationen. Die detektierten Sichtlinieninformationen werden durch die Steuereinheit 12 von der Kommunikationseinheit 15 an den Server 2 übertragen.
  • Die Selbstpositionsspezifikationseinheit 122 spezifiziert eine dreidimensionale Position des Informationsverarbeitungsendgeräts 1, d. h. eine dreidimensionale Position des Benutzers, der das Informationsverarbeitungsendgerät 1 trägt, basierend auf den von der Sensoreinheit 11 erfassten Sensordaten.
  • Insbesondere kann beispielsweise die Selbstpositionsspezifikationseinheit 122 eine Selbstposition basierend auf den Positionsinformationen spezifizieren, die von der in der Sensoreinheit 11 enthaltenen Positionsmesseinheit 116 erfasst wurden. Die Selbstpositionsspezifikationseinheit 122 kann auch basierend auf den Sensordaten, die von der Sensoreinheit 11 erfasst werden, einen dreidimensionalen Raum erkennen, um die Selbstposition zu spezifizieren. Die spezifizierte Selbstposition wird durch die Steuereinheit 12 von der Kommunikationseinheit 15 zum Server 2 übertragen.
  • Die Gemeinsamnutzung-Steuereinheit 124 führt eine Steuerung zum gemeinsamen Nutzen der 3D-Modelldaten mit dem anderen Informationsverarbeitungsendgerät durch, das dieselben 3D-Modelldaten gemeinsam nutzt und betrachtet. Insbesondere führt die Gemeinsamnutzung-Steuereinheit 124 eine Steuerung zum Übertragen der vom Server 2 empfangenen 3D-Modelldaten an das Informationsverarbeitungsendgerät einer gemeinsam nutzenden Person durch. Die Gemeinsamnutzung-Steuereinheit 124 kann auch eine Steuerung zum Empfangen der 3D-Modelldaten von dem Informationsverarbeitungsendgerät der gemeinsam nutzenden Person durchführen.
  • Die Anzeigeverarbeitungseinheit 126 führt eine Verarbeitung zum Anzeigen der 3D-Modelldaten auf der Anzeigeeinheit 13 durch. Insbesondere zeigt die Anzeigeverarbeitungseinheit 126 die 3D-Modelldaten an, die vom Server 2 über die Kommunikationseinheit 15 empfangen werden, und die 3D-Modelldaten, die vom Informationsverarbeitungsendgerät der gemeinsam nutzenden Person an einer bestimmten Anzeigeposition (einer dreidimensionalen Position im realen Raum) empfangen werden.
  • Anzeigeeinheit 13
  • Die Anzeigeeinheit 13 wird beispielsweise durch eine Linseneinheit (einem Beispiel einer transmittierenden Anzeigeeinheit) implementiert, die eine Anzeige unter Verwendung einer hologrammoptischen Technik, einer Flüssigkristallanzeigevorrichtung (LCD) und einer Vorrichtung mit organischen Leuchtdioden (OLED) durchführt und dergleichen. Die Anzeigeeinheit 13 kann von transmittierender Art, von transflektiver Art oder nicht transmittierender Art sein.
  • Lautsprecher 14
  • Der Lautsprecher 14 gibt ein Sprachsignal gemäß der Steuerung durch die Steuereinheit 12 wieder.
  • Kommunikationseinheit 15
  • Die Kommunikationseinheit 15 ist ein Kommunikationsmodul zum Senden/Empfangen von Daten zu/von einem anderen Gerät auf drahtgebundene/drahtlose Weise. Beispielsweise kommuniziert die Kommunikationseinheit 15 drahtlos mit einer externen Einrichtung direkt oder über einen Netzwerkzugriffspunkt unter Verwendung eines Schemas wie eines drahtgebundenen lokalen Netzwerks (LAN), eines drahtlosen LANs, Wireless Fidelity (Wi-Fi, eingetragenes Warenzeichen), Infrarot-Kommunikation, Bluetooth (eingetragenes Warenzeichen), Kurzstrecken-/ Kontaktlos-Kommunikation und ein Mobil-Kommunikationsnetz (Long Term Evolution (LTE), Mobil-Kommunikationsschema der dritten Generation (3G)).
  • Betriebseingabeeinheit 16
  • Die Betriebseingabeeinheit 16 wird von einem Betriebselement mit einer physischen Struktur, wie einem Schalter, einer Taste oder einem Hebel, implementiert.
  • Speichereinheit 17
  • Die Speichereinheit 17 wird durch einen Nurlesespeicher (ROM), der ein Computerprogramm, einen arithmetischen Parameter und dergleichen speichert, der für die von der oben beschriebenen Steuereinheit 12 durchgeführte Verarbeitung verwendet wird, und einen Direktzugriffsspeicher (RAM), der vorübergehend einen Parameter und dergleichen, die geeignet variieren, speichert, implementiert. Die Speichereinheit 17 gemäß der vorliegenden Ausführungsform kann beispielsweise verschiedene Arten von Sensorinformationen, ein Erkennungsergebnis und Verbindungsinformationen speichern.
  • Die Ausgestaltung des
  • Informationsverarbeitungsendgeräts 1 gemäß der vorliegenden Ausführungsform wurde oben spezifisch beschrieben. Die Ausgestaltung, die oben unter Bezugnahme auf 2 beschrieben wurde, ist lediglich ein Beispiel, und die funktionale Ausgestaltung des Informationsverarbeitungsendgeräts 1 gemäß der vorliegenden Ausführungsform ist nicht darauf beschränkt.
  • Beispielsweise enthält das
  • Informationsverarbeitungsendgerät 1 gemäß der vorliegenden Ausführungsform nicht notwendigerweise die gesamte in 2 dargestellte Ausgestaltung. Das Informationsverarbeitungsendgerät 1 kann beispielsweise eine Ausgestaltung aufweisen, die das Mikrofon 112 oder den Biosensor 117 nicht enthält. Das Informationsverarbeitungsendgerät 1 kann aus mehreren Vorrichtungen bestehen. Beispielsweise kann das Informationsverarbeitungsendgerät 1 aus einem vom Benutzer getragenen Wearable von der Art einer Brille, einem Wearable-Endgerät, wie einem Smartband, einem Smartphone und dergleichen bestehen. Zumindest ein Teil der Sensoreinheit 11 kann ein Umweltumgebungssensor sein (zum Beispiel eine Überwachungskamera, ein Mikrofon, ein Infrarotsensor, ein Ultraschallsensor und dergleichen, die in einem Raum angeordnet sind).
  • Beispielsweise kann mindestens ein Teil der Funktion der Steuereinheit 12 des Informationsverarbeitungsendgeräts 1 in einer anderen Vorrichtung vorhanden sein, die zur Kommunikation damit über die Kommunikationseinheit 15 verbunden ist. Beispielsweise kann mindestens ein Teil der Funktion der Steuereinheit 12 des Informationsverarbeitungsendgeräts 1 einem Zwischenserver, einem Cloud-Server im Internet oder dergleichen zugewiesen werden. Alternativ kann die Ausgestaltung derart sein, dass eine von der Steuereinheit 12 durchgeführte Verarbeitungsebene einfach ist und eine Verarbeitung auf hoher Ebene von einem externen Gerät ausgeführt wird, beispielsweise einem anderen mobilen Gerät wie einem Smartphone, das dem Benutzer gehört, einem Heimserver, einem Edgeserver, einem Zwischenserver oder einem Cloud-Server. Durch Verteilen der Verarbeitung auf mehrere Geräte kann eine Last reduziert werden. Durch Durchführen der Verarbeitung in dem Informationsverarbeitungsendgerät 1 oder durch ein externes Gerät (zum Beispiel einem anderen Mobilgerät, einem Heimserver, einen Edgeserver und dergleichen) mit einer Kommunikationsentfernung relativ nahe an dem Informationsverarbeitungsendgerät 1 in Echtzeit kann die Leistungsfähigkeit verbessert und die Sicherheit gewährleistet werden.
  • Die funktionale Ausgestaltung des Informationsverarbeitungsendgeräts 1 gemäß der vorliegenden Ausführungsform kann gemäß Spezifikationen und Operationen flexibel modifiziert werden.
  • Ausgestaltung des Servers 2
  • 3 ist ein Blockdiagramm, das ein Beispiel für eine logische Ausgestaltung des Servers 2 gemäß der vorliegenden Ausführungsform veranschaulicht. Wie in 3 veranschaulicht, umfasst der Server 2 (Informationsverarbeitungsvorrichtung) eine Steuereinheit 20, eine Kommunikationseinheit 21 und eine Speichereinheit 22.
  • Steuereinheit 20
  • Die Steuereinheit 20 fungiert als eine arithmetische Verarbeitungseinheit und eine Steuervorrichtung und steuert die gesamte Operation in dem Server 2 gemäß verschiedenen Computerprogrammen. Die Steuereinheit 20 wird beispielsweise durch eine elektronische Schaltung, wie eine zentrale Verarbeitungseinheit (CPU) und einen Mikroprozessor, implementiert. Die Steuereinheit 20 kann auch einen Nurlesespeicher (ROM) enthalten, der ein zu verwendendes Computerprogramm, einen arithmetischen Parameter und dergleichen speichert, und einen Direktzugriffsspeicher (RAM), der vorübergehend einen Parameter und dergleichen speichert, der geeignet variiert.
  • Die Steuereinheit 20 gemäß der vorliegenden Ausführungsform fungiert auch als Download-Startpunkt-Bestimmungseinheit 201, als Übertragungsdaten-Bestimmungseinheit 202 und als Datenübertragungssteuereinheit 203.
  • Die Download-Startpunkt-Bestimmungseinheit 201 bestimmt einen Download-Startpunkt der 3D-Modelldaten (d. h. einen Übertragungsstartpunkt dreidimensionaler Bildinformationen) als Antwort auf eine Anforderung zum Herunterladen der 3D-Modelldaten vom Informationsverarbeitungsendgerät 1. Insbesondere bestimmt die Download-Startpunkt-Bestimmungseinheit 201 den Download-Startpunkt, der den Benutzern gemeinsam ist, basierend auf den Positionen und den Sichtlinieninformationen der Benutzer, die von mehreren der Informationsverarbeitungsendgeräte 1 empfangen wurden, und der Anzeigeposition des 3D-Modells von Interesse (dreidimensionale Position im realen Raum). Beispielsweise schätzt die Download-Startpunkt-Bestimmungseinheit 201 die Anblickpunkte der jeweiligen Benutzer in einem Fall, in dem die Benutzer dieselben 3D-Modelldaten sehen, und bestimmt einen Schwerpunkt der Anblickpunkte als Download-Startpunkt. Der Anblickpunkt ist ein Punkt, an dem sich die Richtung der Sichtlinienrichtung mit einer Größenumrissfigur 32 schneidet. Die Download-Startpunkt-Bestimmungseinheit 201 kann ein Zentrum eines Bereichs der 3D-Modelldaten bestimmen, das von den Benutzern als Download-Startpunkt angesehen werden kann. Der Download-Startpunkt ist nicht auf einen strengen Punkt beschränkt und kann beispielsweise eine Ebene umfassen. Details über die Bestimmungsverarbeitung für den Download-Startpunkt gemäß der vorliegenden Ausführungsform werden später beschrieben.
  • Die Übertragungsdaten-Bestimmungseinheit 202 bestimmt Datenstücke, die an die Informationsverarbeitungsendgeräte 1 übertragen werden sollen, die Anforderungen unter Teilen der interessierenden 3D-Modelldaten basierend auf dem bestimmten Download-Startpunkt gestellt haben. Beispielsweise kann die Übertragungsdaten-Bestimmungseinheit 202 Daten in einem vorbestimmten Bereich bestimmen, der auf den Download-Startpunkt zentriert ist, oder kann Teile einschließlich des Download-Startpunkts bestimmen (zum Beispiel in einem Fall von 3D-Modelldaten eines Fahrzeugs einen Reifen, eine Motorhaube, eine Stoßstange und dergleichen). Bei der vorliegenden Ausführungsform werden die 3D-Modelldaten nacheinander bevorzugt von dem bestimmten Download-Startpunkt übertragen, so dass die Übertragungsdaten-Bestimmungseinheit 202 eine Download-Fortschrittsrichtung bestimmt und auch Übertragungsdaten bestimmt, die als nächstes unter Teilen der 3D-Modelldaten von Interesse übertragen werden sollen. Beispielsweise kann die Übertragungsdaten-Bestimmungseinheit 202 einen Übertragungsbereich vom Download-Startpunkt aus gleichmäßig radial erweitern oder den Übertragungsbereich für alle benachbarten Teile erweitern. Die Übertragungsdaten-Bestimmungseinheit 202 überträgt nacheinander die restlichen Teile der 3D-Modelldaten (Daten in der Peripherie des Download-Startpunkts) unter einer bestimmten Bedingung für eine bestimmte Zeit. Beispielsweise wird in einem Fall, in dem sich der Benutzer bewegt und sich die Sichtlinienrichtung stark ändert, der Download-Startpunkt aktualisiert, so dass die Übertragungsdaten-Bestimmungseinheit 202 die Übertragungsdaten, basierend auf einem neuen Download-Startpunkt, unter den Teilen von 3D-Modelldaten bestimmt, die nicht übertragen wurden.
  • In einem Fall, in dem veranlasst wird, dass die Informationsverarbeitungsendgeräte 1 dieselben 3D-Modelldaten gemeinsam nutzen, berechnet die Übertragungsdaten-Bestimmungseinheit 202 die Zuordnung der Datenmenge und bestimmt die Übertragungsdaten für jedes der Informationsverarbeitungsendgeräte 1. Indem veranlasst wird, dass die Informationsverarbeitungsendgeräte 1 die 3D-Modelldaten gemeinsam nutzen, ist es möglich zu verhindern, dass dieselben Daten an die Informationsverarbeitungsendgeräte 1 übertragen werden, so dass eine vom Server 2 durchgeführte Last der Übertragungsverarbeitung reduziert wird und verhindert werden kann, dass ein Datenband für lange Zeit besetzt wird.
  • Die Datenübertragungssteuereinheit 203 führt eine Steuerung zum Übertragen der von der Übertragungsdaten-Bestimmungseinheit 202 bestimmten Daten von der Kommunikationseinheit 21 zum Informationsverarbeitungsendgerät 1 durch.
  • Kommunikationseinheit 21
  • Die Kommunikationseinheit 21 ist drahtgebunden oder drahtlos mit einem Netzwerk verbunden und überträgt/empfängt Daten zu/von jedem der Informationsverarbeitungsendgeräte 1 über das Netzwerk. Die Kommunikationseinheit 21 ist beispielsweise mit dem Informationsverarbeitungsendgerät 1 zur Kommunikation über ein drahtgebundenes/drahtloses lokales Netzwerk (LAN), Wireless Fidelity (Wi-Fi, eingetragene Marke) oder dergleichen verbunden.
  • Speichereinheit 22
  • Die Speichereinheit 22 wird durch einen ROM, das ein Computerprogramm, einen arithmetischen Parameter und dergleichen speichert, die für die von der Steuereinheit 20 durchgeführte Verarbeitung verwendet werden, und einen RAM, der vorübergehend einen Parameter und dergleichen speichert, die geeignet variieren, implementiert. Beispielsweise speichert die Speichereinheit 22 gemäß der vorliegenden Ausführungsform die 3D-Modelldaten und Benutzerinformationen. Die Benutzerinformationen umfassen Selbstpositionsinformationen und die Sichtlinieninformationen, die von dem Informationsverarbeitungsendgerät 1 übertragen wurden. Die Speichereinheit 22 kann auch einen Verlauf des Benutzers akkumulieren, der die 3D-Modelldaten betrachtet hat (einen Anzeigeverlauf und einen Operationsverlauf). Der Betrachtungsverlauf enthält einen Verlauf der Position und der Sichtlinienrichtung zum Zeitpunkt der Anzeige in Verbindung mit den 3D-Modelldaten.
  • Die Ausgestaltung des Servers 2 gemäß der vorliegenden Ausführungsform wurde oben spezifisch beschrieben. Die in 3 veranschaulichte Ausgestaltung des Servers 2 ist lediglich ein Beispiel, und die vorliegende Ausführungsform ist nicht darauf beschränkt. Beispielsweise kann mindestens ein Teil der Ausgestaltung des Servers 2 in einem externen Gerät angeordnet sein, oder zumindest ein Teil der Funktionen der Steuereinheit 20 kann durch das Informationsverarbeitungsendgerät 1 oder ein Informationsverarbeitungsgerät mit einer Kommunikation Entfernung relativ nahe am Informationsverarbeitungsterminal 1 implementiert werden (was beispielsweise als Edgeserver bezeichnet wird). Durch geeignete Verteilung der Ausgestaltung des Servers 2 kann die Echtzeitleistungsfähigkeit verbessert werden und die Verarbeitungslast kann verringert werden.
  • Hinsichtlich Bestimmung des Download-Startpunkts von 3D-Modelldaten Das Folgende beschreibt die Bestimmungsverarbeitung für den Download-Startpunkt, die von der oben beschriebenen Download-Startpunkt-Bestimmungseinheit 201 unter Verwendung eines spezifischen Beispiels durchgeführt wird.
  • Erstes Bestimmungsverfahren
  • 4 ist ein Diagramm zum Erläutern einer Übersicht eines ersten Bestimmungsverfahrens für den Download-Startpunkt gemäß der vorliegenden Ausführungsform. Wie in 4 veranschaulicht ist, kann die Download-Startpunkt-Bestimmungseinheit 201 die Anblickpunkte 41a und 41b auf das 3D-Modell jedes Benutzers basierend auf den Positionen v1 und v2 und den Sichtlinienrichtungen der Benutzer schätzen, die dieselben 3D-Modelldaten 30 gemeinsam nutzen und eine Anzeigeposition der 3D-Modelldaten 30 im realen Raum anzeigen, und einen Schwerpunkt davon (Benutzerreferenzpunkt 42) als Download-Startpunkt bestimmen. In diesem Fall werden Daten in der Peripherie des Download-Startpunkts (Benutzerreferenzpunkt 42) bevorzugt heruntergeladen und angezeigt, so dass der Download eines Teils, der vom Benutzer A und vom Benutzer B betrachtet werden kann, zunächst abgeschlossen wird und hochauflösende 3D-Modelldaten angezeigt werden. Die Download-Startpunkt-Bestimmungseinheit 201 kann es zu einer Bedingung machen, dass die Benutzer in gewissem Maße nahe beieinander sind.
  • Das Folgende beschreibt das erste Bestimmungsverfahren unter Bezugnahme auf 5 und 6 im Detail.
  • Zunächst werden im Folgenden unter Bezugnahme auf 5 Informationen beschrieben, die in den 3D-Modelldaten gemäß der vorliegenden Ausführungsform enthalten sind. 5 ist ein Diagramm zum Erläutern von Größenumrissinformationen der 3D-Modelldaten. Wie in 5 veranschaulicht ist, enthalten die 3D-Modelldaten gemäß der vorliegenden Ausführungsform Informationen (einschließlich Größeninformationen eines Radius und einer Größe der 3D-Modelldaten) der Größenumrissfigur 32 mit einer einfachen Form (zum Beispiel einem Kegel, einem Zylinder oder einer Kugel), die eine schematische Gestalt der 3D-Modelldaten 30 repräsentiert. Die Größenumrissfigur 32 weist eine kleinere Datenmenge als die der hochauflösenden 3D-Modelldaten 30 auf.
  • Für die 3D-Modelldaten wird ein Referenzpunkt 50 zum Herunterladen festgelegt. Der Referenzpunkt 50 zum Herunterladen kann auf der Größenumrissfigur 32 oder in den 3D-Modelldaten 30 eingestellt werden. Der Referenzpunkt 50 ist ein vorbestimmter Vorzugspunkt wie etwa ein wichtiger Teil oder ein Teil, der von den 3D-Modelldaten betrachtet werden soll, und kann von einem Ersteller der 3D-Modelldaten im Voraus festgelegt werden. Alternativ kann der Referenzpunkt 50 eine Frontrichtung (die Richtung kann vom Ersteller zum Zeitpunkt der Erstellung festgelegt werden) der 3D-Modelldaten 30 sein und kann automatisch festgelegt werden. Der Referenzpunkt 50 kann innerhalb der 3D-Modelldaten angeordnet sein. Beispielsweise kann in einem Fall, in dem die 3D-Modelldaten „Haus“ sind, ein Innenraum innerhalb des Hauses wichtig sein, so dass der Referenzpunkt 50 zum Herunterladen an einem Abschnitt angeordnet sein kann, an dem eine Tür geöffnet oder ein Teil zum Beispiel durch ein Fenster betrachtet wird.
  • Zusätzlich können die 3D-Modelldaten ein Flag aufweisen, das angibt, ob die Daten gedreht werden können. Zum Beispiel in einem Fall, in dem die 3D-Modelldaten „Fahrzeug“ sind und auf einer Straße im realen Raum angezeigt werden, wird, wenn „Fahrzeug“ horizontal oder vertikal gedreht wird, um angezeigt zu werden, eine Anzeigerichtung des Fahrzeugs in Bezug auf die Straße seltsam, so dass angenommen wird, dass ein Flag gesetzt wird, das angibt, dass die Daten nicht gedreht werden können. Abhängig vom Inhalt der Modelldaten oder einer Anzeigeumgebung kann der Ersteller und dergleichen jedoch zuvor eine Rotationsanzeige der 3D-Modelldaten zum Zeitpunkt der Anzeige zugelassen haben.
  • Die Download-Startpunkt-Bestimmungseinheit 201 gemäß der vorliegenden Ausführungsform bestimmt den Download-Startpunkt unter Bezugnahme auf die Größenumrissinformationen und den Referenzpunkt der oben beschriebenen 3D-Modelldaten. 6 ist ein Diagramm zum Erläutern der Bestimmung des Download-Startpunkts unter Bezugnahme auf die Größenumrissfigur 32 und den Referenzpunkt 50 in dem ersten Bestimmungsverfahren für den Download-Startpunkt gemäß der vorliegenden Ausführungsform.
  • Wie in 6 veranschaulicht, schätzt die Download-Startpunkt-Bestimmungseinheit 201 die Anblickpunkte 41a und 41b auf der Größenumrissfigur 32 der 3D-Modelldaten 30 basierend auf den Positionen und den Sichtlinienrichtungen der Benutzer und der Anzeigeposition der 3D-Modelldaten 30. Alternativ kann die Größenumrissfigur 32 der 3D-Modelldaten 30 auf die Seite des Informationsverarbeitungsendgeräts 1 übertragen werden, und der Anblickpunkt 41 kann auf der Seite des Informationsverarbeitungsendgeräts 1 geschätzt werden.
  • Anschließend erhält die Download-Startpunkt-Bestimmungseinheit 201 den Schwerpunkt der Anblickpunkte 41a und 41b (im Folgenden als Benutzerreferenzpunkt 42 bezeichnet). Die Download-Startpunkt-Bestimmungseinheit 201 dreht dann die 3D-Modelldaten, so dass ein Abstand zwischen dem Referenzpunkt 50 und dem Benutzerreferenzpunkt 42, der in den 3D-Modelldaten definiert ist, minimal wird, und bestimmt einen Scheitelpunkt in den 3D-Modelldaten, der dem Referenzpunkt 50 oder dem Benutzerreferenzpunkt 42 am nächsten liegen soll, als den Download-Startpunkt in einem gedrehten Zustand. Aus diesem Grund können die Benutzer vorzugsweise einen Teil gemeinsam nutzen, der für das Seherlebnis wichtiger ist, um damit zu beginnen, die Daten bequem zu betrachten.
  • In einem Fall, in dem ein Flag, das anzeigt, dass die Daten nicht gedreht werden können, auf den 3D-Modelldaten gesetzt ist, kann die Download-Startpunkt-Bestimmungseinheit 201 in einem Zustand, in dem die 3D-Modelldaten nicht gedreht werden, Scheitelkoordinaten auf den 3D-Modelldaten, die dem Benutzerreferenzpunkt 42 am nächsten liegen, als den Download-Startpunkt bestimmen. Aufgrund dessen können die Benutzer die 3D-Modelldaten gemeinsam nutzen und beginnen, die 3D-Modelldaten bequem zu betrachten. Auch in einem Fall, in dem ein Rotationsflag nicht gesetzt ist, oder in einem Fall, in dem ein Flag gesetzt ist, das angibt, dass die Daten gedreht werden können, können in einem Zustand, in dem die 3D-Modelldaten nicht gedreht werden, Scheitelkoordinaten auf den 3D-Modelldaten, die dem Benutzerreferenzpunkt 42 am nächsten liegen, als Download-Startpunkt bestimmt werden.
  • Zweites Bestimmungsverfahren
  • Das Folgende beschreibt ein zweites Bestimmungsverfahren für den Download-Startpunkt gemäß der vorliegenden Ausführungsform unter Bezugnahme auf 7 bis 8.
  • 7 ist ein Diagramm zur Erläuterung eines Falls, in dem eine große Anzahl von Download-Startpunkten 52 auf den 3D-Modelldaten in dem zweiten Bestimmungsverfahren für den Download-Startpunkt angeordnet ist. Die startbaren Download-Punkte 52 können auf der Größenumrissfigur 32 der 3D-Modelldaten 30 angeordnet sein oder können auf den 3D-Modelldaten 30 darin angeordnet sein. Die startbaren Download-Punkte 52 können an gleichen Punkten auf den 3D-Modelldaten 30 angeordnet sein oder können beispielsweise für jeweilige Teile der 3D-Modelldaten 30 angeordnet sein.
  • 8 ist ein Diagramm zur Erläuterung der Bestimmung des Download-Startpunkts unter Bezugnahme auf einen startbaren Download-Punkt in dem zweiten Bestimmungsverfahren für den Download-Startpunkt. Wie in 8 veranschaulicht, schätzt die Download-Startpunkt-Bestimmungseinheit 201 die Anblickpunkte 41a und 41b auf der Größenumrissfigur 32 der 3D-Modelldaten 30 basierend auf den Positionen und den Sichtlinienrichtungen der Benutzer und der Anzeigeposition der 3D-Modelldaten 30. Alternativ kann die Größenumrissfigur 32 der 3D-Modelldaten 30 auf die Seite des Informationsverarbeitungsendgeräts 1 übertragen werden, und der Anblickpunkt 41 kann auf der Seite des Informationsverarbeitungsendgeräts 1 geschätzt werden.
  • Anschließend erhält die Download-Startpunkt-Bestimmungseinheit 201 den Schwerpunkt der Anblickpunkte 41a und 41b (Benutzerreferenzpunkt 42). Die Download-Startpunkt-Bestimmungseinheit 201 bestimmt dann als Download-Startpunkt einen startbaren Download-Punkt 52a, der dem Benutzerreferenzpunkt 42 am nächsten liegt, unter einer großen Anzahl von startbaren Download-Punkten 52, die in den 3D-Modelldaten definiert sind. Aus diesem Grund können die Benutzer vorzugsweise einen Teil gemeinsam nutzen, der für das Seherlebnis wichtiger ist, um damit zu beginnen, die Daten bequem zu betrachten.
  • Abhängig von einer Art eines Bandes für die Datenkommunikation mit dem Informationsverarbeitungsendgerät 1, einer Menge der zu übertragenden 3D-Modelldaten und dergleichen kann die Download-Startpunkt-Bestimmungseinheit 201 drei oder vier startbare Download-Punkte in der Peripherie der startbaren Download-Punkte 52a als Download-Startpunkte bestimmen, wenn deren Einfluss auf eine Verarbeitungslast oder eine Download-Zeit gering ist. In diesem Fall werden der startbare Download-Punkt 52a und die drei oder vier startbaren Download-Punkte in ihrer Peripherie vorzugsweise zum Herunterladen gestartet.
  • Hinsichtlich der Richtung des Download-Fortschritts
  • Die Übertragungsdaten-Bestimmungseinheit 202 gemäß der vorliegenden Ausführungsform bestimmt Daten, die nacheinander von dem bestimmten Download-Startpunkt übertragen (heruntergeladen) werden sollen. Die Download-Fortschrittsrichtung an diesem Punkt kann beispielsweise Richtungen sein, die sich radial und gleichmäßig vom Download-Startpunkt ausbreiten.
  • In einem Fall, in dem eine große Anzahl von startbaren Download-Punkten 52 auf die 3D-Modelldaten eingestellt ist, kann die Übertragungsdaten-Bestimmungseinheit 202 die Download-Fortschrittsrichtung als Richtungen einschließlich startbaren Download-Punkten in der Peripherie des bestimmten Download-Startpunkts bestimmen. 9 ist ein Diagramm zum Erläutern der Bestimmung der Download-Fortschrittsrichtung unter Verwendung des startbaren Download-Punkts gemäß der vorliegenden Ausführungsform.
  • Wie in 9 veranschaulicht ist, kann die Übertragungsdaten-Bestimmungseinheit 202 bestimmen, dass die Download-Fortschrittsrichtung Richtungen einschließlich der Download-Startpunkte 52b bis 52e in der Peripherie sind, die sich radial von dem bestimmten Download-Startpunkt (Download-Startpunkt 52a) ausbreiten. Selbst in einem Fall, in dem eine große Anzahl von startbaren Download-Punkten 52 auf die 3D-Modelldaten eingestellt ist, kann die Übertragungsdaten-Bestimmungseinheit 202 die Download-Fortschrittsrichtung als Richtungen bestimmen, die sich radial und gleichmäßig von dem bestimmten Download-Startpunkt ausbreiten.
  • Die Übertragungsdaten-Bestimmungseinheit 202 kann die Download-Fortschrittsrichtung unter Bezugnahme auf einen Hochfrequenz-Anblickpunkt (zum Beispiel den Anblickpunkt, an dem die Anzahl der Datenansichten größer oder gleich einem vorbestimmten Wert ist) bestimmen, der basierend auf einem Anzeigeverlauf oder einem Betriebsverlauf eines anderen Benutzers, der den 3D-Modelldaten zugeordnet ist, berechnet wird. Aus diesem Grund ist es möglich, vorzugsweise einen Ort herunterzuladen, der vom Benutzer nach Bewegung mit hoher Wahrscheinlichkeit betrachtet werden kann.
  • 10 ist ein Diagramm zum Erläutern der Bestimmung der Download-Fortschrittsrichtung unter Verwendung eines Hochfrequenz-Anblickpunkts gemäß der vorliegenden Ausführungsform. Wie in 10 veranschaulicht ist, kann in einem Fall, in dem ein Hochfrequenz-Anblickpunkt 52u basierend auf dem Betrachtungsverlauf der 3D-Modelldaten berechnet wird, die Übertragungsdaten-Bestimmungseinheit 202 bestimmen, dass die Download-Fortschrittsrichtung eine Richtung ist, die den Hochfrequenz-Anblickpunkt 52u vom Download-Startpunkt (startbarer Download-Punkt 52a) beinhaltet.
  • Als Beispiel für den Betriebsverlauf sind Informationen über eine Operation zum Öffnen einer Tür eines „Fahrzeugs“ als die 3D-Modelldaten, zum Beispiel zum Öffnen eines Kofferraums davon und eine Operation der 3D-Modelldaten, wie „Taste“ oder „PC“, dargestellt (was als eine virtuelle Taste, ein virtueller PC und dergleichen bezeichnet wird). In einem Fall, in dem eine hohe Wahrscheinlichkeit dafür besteht, dass eine Tür oder ein Kofferraum geöffnet wird (in einem Fall, in dem der Hochfrequenz-Anblickpunkt ein innerer Teil der Tür oder des Kofferraums ist), bestimmt die Übertragungsdaten-Bestimmungseinheit 202 die Download-Fortschrittsrichtung, damit Anzeigedaten von Inhalten innerhalb der Tür oder des Kofferraums bevorzugt übertragen werden. Alternativ kann die Übertragungsdaten-Bestimmungseinheit 202 bestimmen, dass die Download-Fortschrittsrichtung eine Richtung zum Hochfrequenz-Anblickpunkt und Richtungen einschließlich von startbaren Download-Punkten in der Peripherie ist.
  • In einem Fall, in dem sich der Benutzer bewegt und eine Bewegungsentfernung des Benutzers innerhalb eines vorbestimmten Bereichs liegt, kann die Übertragungsdaten-Bestimmungseinheit 202 die Download-Verarbeitungsrichtung als eine Richtung bestimmen, die in Richtung eines Punktes fortschreitet, an dem sich die Sichtlinienrichtung mit der Größenumrissfigur oder den 3D-Modelldaten (Anblickpunkt) oder einem Schwerpunkt neuer Anblickpunkte der Benutzer (Benutzerreferenzpunkt) basierend auf einer neuen Position und Sichtlinienrichtung des Benutzers schneidet.
  • Die Übertragungsdaten-Bestimmungseinheit 202 kann auch bestimmen, keine Anzeigedaten aus einer Richtung zu übertragen, in die sich der Benutzer nicht bewegen kann, oder solche Anzeigedaten letztlich basierend auf der Anzeigeposition der 3D-Modelldaten zu übertragen. In einem Fall, in dem die 3D-Modelldaten von „Fahrzeug“ in der Nähe einer Wand angezeigt werden, kann der Benutzer sie beispielsweise nicht von der Wandseite aus anzeigen, sodass die Anzeigedaten auf der Wandseite nicht erforderlich sind oder eine niedrige Priorität haben.
  • Bestimmung der mehreren Download-Startpunkte
  • Es wurde die Verarbeitung zum Bestimmen des Download-Startpunkts basierend auf den Positionen und Sichtlinienrichtungen der Benutzer und der Anzeigeposition der 3D-Modelldaten beschrieben, die von den Benutzern gemeinsam genutzt und betrachtet werden sollen, wobei die Verarbeitung durch die Download-Startpunkt-Bestimmungseinheit 201 gemäß der vorliegenden Ausführungsform durchgeführt wird. Die Verarbeitung kann es zu einer Bedingung machen, dass sich die Benutzer beispielsweise in einem gewissen Grad nahe beieinander befinden (ein Abstand zwischen den Benutzern liegt innerhalb eines bestimmten Bereichs), der Blickpunkt jedes Benutzers innerhalb eines vorbestimmten Abstands liegt, wobei ein Teil, der den Anblickpunkt von jedem Benutzer enthält, derselbe ist, sich der Anblickpunkt jedes Benutzers beispielsweise in der gleichen Richtung der 3D-Modelldaten befindet (eine Vorderseite, eine Seitenfläche, eine Rückseite oder dergleichen). Das heißt, wie in 11 veranschaulicht ist, dass beispielsweise in einem Fall, in dem die Positionen v1 und v2 und die Sichtlinienrichtungen der Benutzer, die dieselben 3D-Modelldaten 30 gemeinsam nutzen und betrachten, stark unterschiedlich sind, ein gemeinsamer Teil in einem sichtbaren Bereich der 3D-Modelldaten nicht vorhanden ist (oder die Anzahl gemeinsamer Teile klein ist), so dass es schwierig ist, einen Teil, der von beiden Benutzern ohne Wartezeit betrachtet werden kann, bequem zu betrachten, selbst wenn der Schwerpunkt der Blickpunkte 44a und 44b der Benutzer als der Download-Startpunkt festgelegt wird. In einem Fall, in dem die oben beschriebene Bedingung nicht erfüllt ist, wie in 11 veranschaulicht ist, kann die Download-Startpunkt-Bestimmungseinheit 201 gemäß der vorliegenden Ausführungsform die Anblickpunkte 44a und 44b der Benutzer jeweils als die Download-Startpunkte bestimmen. Aus diesem Grund wird der Download von jedem der Anblickpunkte aus gestartet.
  • Wie in 11 veranschaulicht ist, kann in einem Fall, in dem die Anblickpunkte 44a und 44b der Benutzer jeweils als die Download-Startpunkte bestimmt werden, die Übertragungsdaten-Bestimmungseinheit 202 eine Download-Richtung als eine Richtung zum anderen Download-Startpunkt bestimmen.
  • Bedienungsverarbeitung
  • Das Folgende beschreibt speziell die Operationsverarbeitung unter Bezugnahme auf 12, die von dem Informationsverarbeitungssystem gemäß der vorliegenden Ausführungsform ausgeführt wird. 12 ist ein Ablaufdiagramm, das eine Verarbeitungsprozedur des Informationsverarbeitungssystems gemäß der vorliegenden Ausführungsform darstellt.
  • Wie in 12 veranschaulicht ist, detektiert jedes des Informationsverarbeitungsendgeräts 1A und des Informationsverarbeitungsendgeräts 1B eine Sichtlinie des Benutzers (Schritte S103 und S105), spezifiziert eine Selbstposition (Schritte S106 und S118) und spezifiziert einen Anblickpunkt des Benutzers auf dem 3D-Modell (Schritte S109 und S121). Der Anblickpunkt des Benutzers kann auf der Seite des Servers 2 spezifiziert sein.
  • Als nächstes senden das Informationsverarbeitungsendgerät 1A und das Informationsverarbeitungsendgerät 1B eine Anforderung zum Anzeigen der 3D-Modelldaten an den Server 2 (Schritte S112 und S124). Insbesondere übertragen das Informationsverarbeitungsendgerät 1A und das Informationsverarbeitungsendgerät 1B beispielsweise die Sichtlinieninformationen des Benutzers, die spezifizierten Positionsinformationen des Benutzers und die Anblickpunktinformationen an den Server 2. Das Informationsverarbeitungsendgerät 1A und das Informationsverarbeitungsendgerät 1B können gleichzeitig Endgeräteinformationen übertragen. Die Endgeräteinformationen enthalten Informationen über eine Verarbeitungskapazität der Endgeräteinformationen und Datenbandinformationen, die zur später beschriebenen Berechnung der Zuordnung der Datenmenge verwendet werden.
  • Die vom Informationsverarbeitungsendgerät 1 an den Server 2 übertragene Anforderung kann einen Versatz von einem herunterzuladenden Objekt (d. h. der 3D-Modelldaten) und Parameter, wie einen vertikalen oder horizontalen Winkel (Parameter dreidimensionaler Positionsinformationen und die Sichtlinienrichtung), enthalten, wie nachfolgend beschrieben ist.
  • Formatbeispiel für die Zugriffs-URL
    https://... ?offset x = 100 &offset y = 200 &angle v = 125 &angle h = 90 &multipoint = 0
  • Anschließend berechnet der Server 2 den Benutzerreferenzpunkt basierend auf den Anblickpunktinformationen der Benutzer (Schritt S127).
  • Als nächstes berechnet der Server 2 den Download-Startpunkt der 3D-Modelldaten (Schritt S130).
  • Als nächstes berechnet der Server 2 die Zuordnung der Datenmenge, die zu jedem der Informationsverarbeitungsendgeräte 1A und 1B übertragen werden soll, basierend auf dem berechneten Download-Startpunkt (Schritt S133).
  • Anschließend überträgt der Server 2 einen Teil der 3D-Modelldaten, die basierend auf dem Download-Startpunkt bestimmt wurden, an jedes der Informationsverarbeitungsendgeräte 1A und 1B (Schritte S136 und S139).
  • Als nächstes führen die Informationsverarbeitungsendgeräte 1A und 1B eine Gemeinsamverarbeitung der empfangenen Daten durch (Schritte S142 und S145).
  • Anschließend führen die Informationsverarbeitungsendgeräte 1A und 1B eine Anzeigeverarbeitung der 3D-Modelldaten durch (Schritte S148 und S151). Das Herunterladen der Daten beginnt von einem Teil, den die Benutzer gemeinsam auf den Informationsverarbeitungsendgeräten 1A und 1B betrachten, so dass die Wartezeit verkürzt wird und die Benutzer in der Lage sind, die 3D-Modelldaten sofort betrachten zu können.
  • Andererseits bestimmt der Server 2, ob eine bestimmte Zeit abgelaufen ist oder eine bestimmte Bedingung erfüllt ist (Schritt S154). Die bestimmte Zeit ist eine bestimmte Zeit ab dem Zeitpunkt, zu dem begonnen wird, die Daten zu übertragen (z. B. mehrere Sekunden, einige zehn Sekunden oder dergleichen). Die bestimmte Bedingung ist ein Fall, in dem sich der Benutzer bewegt und beispielsweise die Richtung der Sichtlinie stark geändert wird. Um eine häufige Aktualisierung des Download-Startpunkts zu vermeiden, werden die oben beschriebenen Verarbeitungsstücke von den Schritten S133 bis S151 wiederholt, bis die bestimmte Zeit verstrichen ist oder die bestimmte Bedingung erfüllt ist, und es wird eine Steuerung durchgeführt, um somit die Daten bevorzugt vom Download-Startpunkt zu übertragen und anschließend periphere Daten zu übertragen.
  • In einem Fall, in dem die bestimmte Zeit abgelaufen ist oder die bestimmte Bedingung erfüllt ist (Ja in Schritt S154), wird die oben beschriebene Verarbeitung aus Schritt S103 wiederholt. Das heißt, ein neuer Download-Startpunkt wird berechnet, und die Übertragungssteuerung wird kontinuierlich für die restlichen Teile der 3D-Modelldaten durchgeführt, vorzugsweise vom neuen Download-Startpunkt.
  • Ein Beispiel der Operationsverarbeitung gemäß der vorliegenden Ausführungsform ist oben beschrieben. Die in 12 veranschaulichte Bedienungsverarbeitung ist lediglich ein Beispiel und die vorliegende Offenbarung nicht auf das in 12 veranschaulichte Beispiel beschränkt. Beispielsweise ist die vorliegende Offenbarung nicht auf die in 12 veranschaulichte Reihenfolge von Schritten beschränkt. Zumindest einige der Schritte können parallel durchgeführt oder in umgekehrter Reihenfolge durchgeführt werden. Beispielsweise können die Verarbeitung in Schritt S103 und die Verarbeitung in Schritt S106 parallel oder in umgekehrter Reihenfolge durchgeführt werden.
  • Alle der in 12 veranschaulichten Verarbeitungsstücke werden nicht notwendigerweise durchgeführt. Beispielsweise kann die Zuordnungsberechnungsverarbeitung in Schritt S133 und die Datengemeinsamnutzung in den Schritten S142 und S145 übersprungen werden.
  • Alle in 12 veranschaulichten Verarbeitungsstücke werden nicht notwendigerweise von der in 12 veranschaulichten Vorrichtung ausgeführt. Beispielsweise können die Verarbeitungsstücke in Schritt S109 und Schritt S121 von dem Server 2 oder einem Zwischenserver (nicht dargestellt) ausgeführt werden.
  • Die Daten können zu jedem der Informationsverarbeitungsendgeräte 1 einer gemeinsam nutzenden Person übertragen werden, ohne eine Zuordnungsberechnung in Schritt S133 durchzuführen, und die Daten können durch das Informationsverarbeitungsendgerät 1 und das Informationsverarbeitungsendgerät 1 der anderen gemeinsam nutzenden Person gemeinsam genutzt werden.
  • Beispielsweise werden in der vorliegenden Ausführungsform die beiden Informationsverarbeitungsendgeräte 1A und 1B verwendet, aber die vorliegende Ausführungsform ist nicht darauf beschränkt. Die Anzahl der Informationsverarbeitungsendgeräte 1 kann drei oder mehr betragen (d. h., dass die Anzahl der gemeinsam nutzenden Personen drei oder mehr betragen kann).
  • Hardwareausgestaltung
  • Als nächstes beschreibt das Folgende ein Hardwareausgestaltungsbeispiel der Informationsverarbeitungsvorrichtung, die dem Informationsverarbeitungsendgerät 1 und dem Server 2 gemäß einer Ausführungsform der vorliegenden Offenbarung gemeinsam ist. 13 ist ein Blockdiagramm, das ein Hardwareausgestaltungsbeispiel der Informationsverarbeitungsvorrichtung darstellt, die dem Informationsverarbeitungsendgerät 1 und dem Server 2 gemäß einer Ausführungsform der vorliegenden Offenbarung gemeinsam ist. In 13 umfasst die Informationsverarbeitungsvorrichtung 800 beispielsweise eine CPU 871, einen ROM 872, einen RAM 873, einen Hostbus 874, eine Brücke 875, einen externen Bus 876, eine Schnittstelle 877, eine Eingabevorrichtung 878, eine Ausgabevorrichtung 879, einen Speicher 880, ein Laufwerk 881, einen Verbindungsport 882 und eine Kommunikationsvorrichtung 883. Die hier beschriebene Hardwareausgestaltung ist lediglich ein Beispiel, und ein Teil der Bestandteilselemente davon kann weggelassen werden. Die Hardwareausgestaltung kann ferner ein anderes Bestandteilselement als die hierin beschriebenen Bestandteilselemente enthalten.
  • CPU 871
  • Die CPU 871 fungiert beispielsweise als eine arithmetische Verarbeitungsvorrichtung oder eine Steuervorrichtung und steuert den gesamten oder einen Teil der Operationen der Bestandteile basierend auf verschiedenen Computerprogrammen, die in dem ROM 872, dem RAM 873, dem Speicher 880 oder einem entfernbaren Aufzeichnungsmedium 901 aufgezeichnet sind.
  • Insbesondere implementiert die CPU 871 die Operationen der Steuereinheit 12 in dem Informationsverarbeitungsendgerät 1.
  • ROM 872, RAM 873
  • Der ROM 872 ist eine Einheit, die ein von der CPU 871 gelesenes Computerprogramm, Daten, die für eine arithmetische Operation verwendet werden, und dergleichen speichert. Beispielsweise speichert der RAM 873 vorübergehend oder dauerhaft ein von der CPU 871 gelesenes Computerprogramm, verschiedene Parameter, die zum Zeitpunkt der Ausführung des Computerprogramms geeignet variieren, und dergleichen.
  • Hostbus 874, Brücke 875, externer Bus 876, Schnittstelle 877
  • Die CPU 871, der ROM 872 und der RAM 873 sind über den Hostbus 874 miteinander verbunden, der beispielsweise eine schnelle Datenübertragung durchführen kann. Andererseits ist der Host-Bus 874 über die Brücke 875 mit dem externen Bus 876 verbunden, dessen Datenübertragungsgeschwindigkeit beispielsweise relativ niedrig ist. Der externe Bus 876 ist über die Schnittstelle 877 mit verschiedenen Bestandteilen verbunden.
  • Eingabevorrichtung 878
  • Als Eingabevorrichtung 878 werden beispielsweise eine Maus, eine Tastatur, ein Touchpanel, eine Taste, ein Schalter und ein Hebel verwendet. Zusätzlich kann als die Eingangsvorrichtung 878 eine abgesetzte Steuerung (im Folgenden als Fernbedienung bezeichnet) verwendet werden, wobei die Fernbedienung in der Lage ist, ein Steuersignal unter Verwendung von Infrarotstrahlen oder anderen Funkwellen zu übertragen. Die Eingabevorrichtung 878 kann auch eine Spracheingabevorrichtung, wie etwa ein Mikrofon, enthalten.
  • Ausgabevorrichtung 879
  • Die Ausgabevorrichtung 879 ist beispielsweise eine Vorrichtung, die den Benutzer visuell oder akustisch über erfasste Informationen benachrichtigen kann, d. h. eine Anzeigevorrichtung, wie eine Kathodenstrahlröhre (CRT), ein LCD oder eine organische EL, eine Audioausgabevorrichtung wie ein Lautsprecher und ein Kopfhörer, ein Drucker, ein Mobiltelefon, ein Fax oder dergleichen. Die Ausgabevorrichtung 879 gemäß der vorliegenden Offenbarung umfasst verschiedene Vibrationsvorrichtungen, die eine taktile Stimulation ausgeben können.
  • Speicher 880
  • Der Speicher 880 ist eine Vorrichtung zum Speichern verschiedener Arten von Daten. Als Speicher 880 werden beispielsweise magnetische Speichervorrichtungen wie ein Festplattenlaufwerk (HDD), eine Halbleiterspeichervorrichtung, eine optische Speichervorrichtung, eine magnetooptische Speichervorrichtung oder dergleichen verwendet.
  • Laufwerk 881
  • Das Laufwerk 881 ist beispielsweise eine Vorrichtung, die in dem entfernbaren Aufzeichnungsmedium 901, wie einer Magnetscheibe, einer optischen Scheibe, einer magnetooptischen Scheibe oder einem Halbleiterspeicher aufgezeichnete Informationen ausliest oder Informationen in das entfernbare Aufzeichnungsmedium 901 schreibt.
  • Entfernbares Aufzeichnungsmedium 901
  • Das entfernbare Aufzeichnungsmedium 901 ist beispielsweise ein DVD-Medium, ein Blu-ray-Medium (eingetragenes Warenzeichen), ein HD-DVD-Medium, verschiedene Arten von Halbleiterspeichermedien oder dergleichen. Offensichtlich kann das entfernbare Aufzeichnungsmedium 901 beispielsweise eine IC-Karte, auf der ein Kontaktlos-IC-Chip montiert ist, eine elektronische Appliance oder dergleichen sein.
  • Verbindungsport 882
  • Der Verbindungsport 882 ist beispielsweise ein Port zum Anschließen einer externen Verbindungsvorrichtung 902, wie beispielsweise eines USB-Ports (Universal Serial Bus), eines IEEE1394-Ports, einer SCSI-Schnittstelle (Small Computer System Interface), eines RS-232C-Ports oder eines optischen Audio-Anschlusses.
  • Externe Verbindungsvorrichtung 902
  • Die externe Verbindungsvorrichtung 902 ist beispielsweise ein Drucker, ein tragbarer Musikspieler, eine Digitalkamera, eine digitale Videokamera, ein IC-Rekorder oder dergleichen.
  • Kommunikationsvorrichtung 883
  • Die Kommunikationsvorrichtung 883 ist eine Kommunikationsvorrichtung zum Herstellen einer Verbindung mit einem Netzwerk, und Beispiele hierfür umfassen eine Kommunikationskarte für ein kabelgebundenes oder kabelloses LAN, Wi-Fi (eingetragenes Warenzeichen), Bluetooth (eingetragenes Warenzeichen) oder kabelloses USB (WUSB), einen Router für optische Kommunikation, einen Router für die asymmetrische digitale Teilnehmerleitung (ADSL), ein Modem für verschiedene Arten der Kommunikation oder dergleichen.
  • Schlussfolgerung
  • Die bevorzugte Ausführungsform der vorliegenden Offenbarung wurde oben ausführlich unter Bezugnahme auf die beigefügten Zeichnungen beschrieben, aber die vorliegende Technik ist nicht darauf beschränkt. Ein Fachmann auf dem Fachgebiet der vorliegenden Offenbarung kann sich offensichtlich verschiedene Beispiele für Varianten oder Modifikationen vorstellen, ohne von der in den ANSPRÜCHEN offenbarten technischen Idee abzuweichen, und diese Varianten oder Modifikationen sind offensichtlich durch den technischen Schutzumfang der vorliegenden Offenbarung eingeschlossen.
  • Beispielsweise ist es möglich, ein Computerprogramm zu erstellen, um zu bewirken, dass Hardware wie eine CPU, ein ROM und ein RAM, die in dem oben beschriebenen Informationsverarbeitungsendgerät 1 enthalten sind, als das Informationsverarbeitungsendgerät 1 fungiert. Zusätzlich wird ein computerlesbares Speichermedium bereitgestellt, das das Computerprogramm speichert.
  • Die in der vorliegenden Beschreibung beschriebenen Auswirkungen dienen lediglich als Erläuterungen oder als Beispiele und sind nicht als Beschränkung vorgesehen. Das heißt, das die Technik gemäß der vorliegenden Offenbarung andere Auswirkungen zeigen kann, die für den Fachmann, basierend auf der Beschreibung hierin zusätzlich zu oder anstelle der oben beschriebenen Auswirkungen, offensichtlich denkbar sind.
  • Die vorliegende Offenbarung kann auch die folgenden Ausgestaltungen einsetzen.
  • (1) Eine Informationsverarbeitungsvorrichtung, die Folgendes umfasst:
    • eine Steuereinheit, die ausgelegt ist zum Durchführen von Steuerung zum Bestimmen eines Übertragungsstartpunkts von dreidimensionalen Bildinformationen basierend auf
    • Positionsinformationen und Sichtlinieninformationen eines ersten Benutzers,
    • Positionsinformationen und Sichtlinieninformationen eines zweiten Benutzers, und
    • Anzeigen von Positionsinformationen der dreidimensionalen Bildinformationen, die vom ersten Benutzer und vom zweiten Benutzer gemeinsam genutzt und betrachtet werden.
  • (2) Informationsverarbeitungsvorrichtung gemäß (1), wobei die Steuereinheit eine Steuerung durchführt zum Übertragen der dreidimensionalen Bildinformationen, vorzugsweise von dem bestimmten Übertragungsstartpunkt aus, an ein Informationsverarbeitungsendgerät.
  • (3) Informationsverarbeitungsvorrichtung gemäß (1) oder (2), wobei die Steuereinheit
    einen ersten Anblickpunkt des ersten Benutzers in den dreidimensionalen Bildinformationen schätzt, basierend auf den Positionsinformationen und den Sichtlinieninformationen des ersten Benutzers und der Anzeigepositionsinformationen der dreidimensionalen Bildinformationen,
    einen zweiten Anblickpunkt des zweiten Benutzers in den dreidimensionalen Bildinformationen schätzt, basierend auf den Positionsinformationen und den Sichtlinieninformationen des zweiten Benutzers und der Anzeigepositionsinformationen der dreidimensionalen Bildinformationen, und
    einen Schwerpunkt des ersten Anblickpunkts und des zweiten Anblickpunkts als den Übertragungsstartpunkt bestimmt. (4) Informationsverarbeitungsvorrichtung nach (1) oder (2), wobei
    die dreidimensionalen Bildinformationen Größenumrissinformationen beinhalten, und
    die Steuereinheit
    einen ersten Anblickpunkt des ersten Benutzers in den Größenumrissinformationen basierend auf den Positionsinformationen und den Sichtlinieninformationen des ersten Benutzers und den Anzeigepositionsinformationen der dreidimensionalen Bildinformationen schätzt,
    einen zweiten Anblickpunkt des zweiten Benutzers in den Größenumrissinformationen basierend auf den Positionsinformationen und den Sichtlinieninformationen des zweiten Benutzers und den Anzeigepositionsinformationen der dreidimensionalen Bildinformationen schätzt, und
    einen Scheitelpunkt der dreidimensionalen Bildinformation, der einem Schwerpunkt des ersten Anblickpunkts und des zweiten Anblickpunkts am nächsten liegt, als Übertragungsstartpunkt bestimmt.
  • (5) Informationsverarbeitungsvorrichtung gemäß (3) oder (4), wobei
    die dreidimensionalen Bildinformationen einen vorab festgelegten Referenzpunkt enthalten, und
    die Steuereinheit die dreidimensionalen Bildinformationen dreht, um zu bewirken, dass der Referenzpunkt dem Schwerpunkt des ersten Blickpunkts und des zweiten Anblickpunkts am nächsten liegt, und bestimmt, dass der Schwerpunkt der Übertragungsstartpunkt ist.
  • (6) Informationsverarbeitungsvorrichtung gemäß (1) oder (2), wobei
    die dreidimensionalen Bildinformationen mehrere vorab festgelegte startbare Übertragungspunkte beinhalten, und die Steuereinheit
    einen ersten Anblickpunkt des ersten Benutzers in den dreidimensionalen Bildinformationen oder den Größenumrissinformationen der dreidimensionalen Bildinformationen schätzt, basierend auf den Positionsinformationen und den Sichtlinieninformationen des ersten Benutzers und der Anzeigepositionsinformationen der dreidimensionalen Bildinformationen,
    einen zweiten Anblickpunkt des zweiten Benutzers in den dreidimensionalen Bildinformationen oder den Größenumrissinformationen schätzt, basierend auf den Positionsinformationen und den Sichtlinieninformationen des zweiten Benutzers und der Anzeigepositionsinformationen der dreidimensionalen Bildinformationen, und
    einen einem Schwerpunkt des ersten Anblickpunkts und des zweiten Anblickpunkts am nächsten liegenden startbaren Übertragungspunkt unter den startbaren Übertragungspunkten als den Übertragungsstartpunkt bestimmt.
  • (7) Informationsverarbeitungsvorrichtung gemäß einem von (1) bis (6), wobei die Steuereinheit eine Steuerung durchführt zum sukzessiven Übertragen der dreidimensionalen Bildinformationen in Richtungen radial und gleichmäßig von dem bestimmten Übertragungsstartpunkt ausbreitend an ein Informationsverarbeitungsendgerät.
  • (8) Informationsverarbeitungsvorrichtung nach einem von (1) bis (6), wobei die Steuereinheit eine Steuerung durchführt zum sukzessiven Übertragen der dreidimensionalen Bildinformationen an ein Informationsverarbeitungsendgerät in einer Richtung vom bestimmten Übertragungsstartpunkt, die mehrere startbare Übertragungspunkte in der Peripherie des Übertragungsstartpunkts enthalten, die im Voraus in den dreidimensionalen Bildinformationen festgelegt wurden.
  • (9) Die Informationsverarbeitungsvorrichtung nach einem von (1) bis (6), wobei die Steuereinheit
    einen dritten Anblickpunkt in den dreidimensionalen Bildinformationen basierend auf mindestens einem Betrachtungsverlauf und einem Operationsverlauf eines anderen Benutzers in Bezug auf die dreidimensionalen Bildinformationen schätzt, und
    eine Steuerung durchführt zum sukzessiven Übertragen der dreidimensionalen Bildinformationen in einer Richtung, die den dritten Anblickpunkt beinhaltet, von dem bestimmten Übertragungsstartpunkt an ein Informationsverarbeitungsendgerät. (10)
  • Die Informationsverarbeitungsvorrichtung nach einem von (1) bis (6), wobei die Steuereinheit
    die Zuordnung von Daten, die an ein erstes Informationsverarbeitungsterminal des ersten Benutzers und ein zweites Informationsverarbeitungsterminal des zweiten Benutzers übertragen werden sollen, berechnet und
    eine Steuerung durchführt zum Übertragen verschiedener Datenstücke für das erste Informationsverarbeitungsendgerät und das zweite Informationsverarbeitungsendgerät zum Zeitpunkt des Übertragens der dreidimensionalen Bildinformationen an das erste Informationsverarbeitungsendgerät und das zweite Informationsverarbeitungsendgerät vorzugsweise von dem bestimmten Übertragungsstartpunkt aus.
  • (11) Die Informationsverarbeitungsvorrichtung nach einem von (1) bis (10), wobei
    die Steuereinheit
    bestimmt, ob ein Abstand zwischen dem ersten Benutzer und dem zweiten Benutzer innerhalb eines vorbestimmten Bereichs liegt, und
    in einem Fall, in dem die Entfernung innerhalb des vorbestimmten Bereichs liegt, eine Bestimmungssteuerung für den Übertragungsstartpunkt durchführt, basierend auf den Positionsinformationen und den Sichtlinieninformationen des ersten Benutzers, den Positionsinformationen und den Sichtlinieninformationen des zweiten Benutzers und den Anzeigepositionsinformationen der dreidimensionalen Bildinformationen.
  • (12) Informationsverarbeitungsverfahren, das von einem Prozessor durchgeführt wird, wobei das Informationsverarbeitungsverfahren Folgendes umfasst:
    • Durchführen einer Steuerung zum Bestimmen eines Übertragungsstartpunkts von dreidimensionalen Bildinformationen basierend auf
    • Positionsinformationen und Sichtlinieninformationen eines ersten Benutzers,
    • Positionsinformationen und Sichtlinieninformationen eines zweiten Benutzers, und
    • Anzeigen von Positionsinformationen der dreidimensionalen Bildinformationen, die vom ersten Benutzer und vom zweiten Benutzer gemeinsam genutzt und betrachtet werden. (13)
    • Ein Computerprogramm zum Bewirken, dass ein Computer als Steuereinheit fungiert, die ausgelegt ist zum Durchführen einer Steuerung zum Bestimmen eines Übertragungsstartpunkts von dreidimensionalen Bildinformationen basierend auf
    • Positionsinformationen und Sichtlinieninformationen eines ersten Benutzers,
    • Positionsinformationen und Sichtlinieninformationen eines zweiten Benutzers, und
    • Anzeigen von Positionsinformationen der dreidimensionalen Bildinformationen, die vom ersten Benutzer und vom zweiten Benutzer gemeinsam genutzt und betrachtet werden.
  • Bezugszeichenliste
    • 1
    Informationsverarbeitungsendgerät
    2
    Server
    11
    Sensoreinheit
    12
    Steuereinheit
    13
    Anzeigeeinheit
    14
    Lautsprecher
    15
    Kommunikationseinheit
    16
    Betriebseingabeeinheit
    17
    Speichereinheit
    20
    Steuereinheit
    21
    Kommunikationseinheit
    22
    Speichereinheit
    110
    Außenkamera
    111
    Innenkamera
    112
    Mikrofon
    113
    Kreiselsensor
    114
    Beschleunigungssensor
    115
    Azimutsensor
    116
    Positionsmesseinheit
    117
    Biosensor
    120
    Sichtliniendetektionseinheit
    122
    Selbstpositionsspezifikationseinheit
    124
    Gemeinsamnutzung-Steuereinheit
    126
    Anzeigeverarbeitungseinheit
    201
    Download-Startpunkt-Bestimmungseinheit
    202
    Übertragungsdaten-Bestimmungseinheit
    203
    Datenübertragungssteuereinheit
  • ZITATE ENTHALTEN IN DER BESCHREIBUNG
  • Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.
  • Zitierte Patentliteratur
    • JP 2017120550 A [0004]

Claims (13)

  1. Informationsverarbeitungsvorrichtung, die Folgendes aufweist: eine Steuereinheit, die ausgelegt ist zum Durchführen von Steuerung zum Bestimmen eines Übertragungsstartpunkts von dreidimensionalen Bildinformationen basierend auf Positionsinformationen und Sichtlinieninformationen eines ersten Benutzers, Positionsinformationen und Sichtlinieninformationen eines zweiten Benutzers, und Anzeigen von Positionsinformationen der dreidimensionalen Bildinformationen, die vom ersten Benutzer und vom zweiten Benutzer gemeinsam genutzt und betrachtet werden.
  2. Informationsverarbeitungsvorrichtung nach Anspruch 1, wobei die Steuereinheit eine Steuerung durchführt zum Übertragen der dreidimensionalen Bildinformationen, vorzugsweise von dem bestimmten Übertragungsstartpunkt aus, an ein Informationsverarbeitungsendgerät.
  3. Informationsverarbeitungsvorrichtung nach Anspruch 1, wobei die Steuereinheit einen ersten Anblickpunkt des ersten Benutzers in den dreidimensionalen Bildinformationen schätzt, basierend auf den Positionsinformationen und den Sichtlinieninformationen des ersten Benutzers und der Anzeigepositionsinformationen der dreidimensionalen Bildinformationen, einen zweiten Anblickpunkt des zweiten Benutzers in den dreidimensionalen Bildinformationen schätzt, basierend auf den Positionsinformationen und den Sichtlinieninformationen des zweiten Benutzers und der Anzeigepositionsinformationen der dreidimensionalen Bildinformationen, und einen Schwerpunkt des ersten Anblickpunkts und des zweiten Anblickpunkts als den Übertragungsstartpunkt bestimmt.
  4. Informationsverarbeitungsvorrichtung nach Anspruch 1, wobei die dreidimensionalen Bildinformationen Größenumrissinformationen beinhalten, und die Steuereinheit einen ersten Anblickpunkt des ersten Benutzers in den Größenumrissinformationen basierend auf den Positionsinformationen und den Sichtlinieninformationen des ersten Benutzers und den Anzeigepositionsinformationen der dreidimensionalen Bildinformationen schätzt, einen zweiten Anblickpunkt des zweiten Benutzers in den Größenumrissinformationen basierend auf den Positionsinformationen und den Sichtlinieninformationen des zweiten Benutzers und den Anzeigepositionsinformationen der dreidimensionalen Bildinformationen schätzt, und einen Scheitelpunkt der dreidimensionalen Bildinformation, der einem Schwerpunkt des ersten Anblickpunkts und des zweiten Anblickpunkts am nächsten liegt, als Übertragungsstartpunkt bestimmt.
  5. Informationsverarbeitungsvorrichtung nach Anspruch 3, wobei die dreidimensionalen Bildinformationen einen vorab festgelegten Referenzpunkt enthalten, und die Steuereinheit die dreidimensionalen Bildinformationen dreht, um zu bewirken, dass der Referenzpunkt dem Schwerpunkt des ersten Blickpunkts und des zweiten Anblickpunkts am nächsten liegt, und bestimmt, dass der Schwerpunkt der Übertragungsstartpunkt ist.
  6. Informationsverarbeitungsvorrichtung nach Anspruch 1, wobei die dreidimensionalen Bildinformationen mehrere vorab festgelegte startbare Übertragungspunkte beinhalten, und die Steuereinheit einen ersten Anblickpunkt des ersten Benutzers in den dreidimensionalen Bildinformationen oder den Größenumrissinformationen der dreidimensionalen Bildinformationen schätzt, basierend auf den Positionsinformationen und den Sichtlinieninformationen des ersten Benutzers und der Anzeigepositionsinformationen der dreidimensionalen Bildinformationen, einen zweiten Anblickpunkt des zweiten Benutzers in den dreidimensionalen Bildinformationen oder den Größenumrissinformationen schätzt, basierend auf den Positionsinformationen und den Sichtlinieninformationen des zweiten Benutzers und der Anzeigepositionsinformationen der dreidimensionalen Bildinformationen, und einen einem Schwerpunkt des ersten Anblickpunkts und des zweiten Anblickpunkts am nächsten liegenden startbaren Übertragungspunkt unter den startbaren Übertragungspunkten als den Übertragungsstartpunkt bestimmt.
  7. Informationsverarbeitungsvorrichtung nach Anspruch 1, wobei die Steuereinheit eine Steuerung durchführt zum sukzessiven Übertragen der dreidimensionalen Bildinformationen in Richtungen radial und gleichmäßig von dem bestimmten Übertragungsstartpunkt ausbreitend an ein Informationsverarbeitungsendgerät.
  8. Informationsverarbeitungsvorrichtung nach Anspruch 6, wobei die Steuereinheit eine Steuerung durchführt zum sukzessiven Übertragen der dreidimensionalen Bildinformationen an ein Informationsverarbeitungsendgerät in einer Richtung vom bestimmten Übertragungsstartpunkt, die mehrere startbare Übertragungspunkte in der Peripherie des Übertragungsstartpunkts enthalten, die im Voraus in den dreidimensionalen Bildinformationen festgelegt wurden.
  9. Informationsverarbeitungsvorrichtung nach Anspruch 1, wobei die Steuereinheit einen dritten Anblickpunkt in den dreidimensionalen Bildinformationen basierend auf mindestens einem Betrachtungsverlauf und einem Operationsverlauf eines anderen Benutzers in Bezug auf die dreidimensionalen Bildinformationen schätzt, und eine Steuerung durchführt zum sukzessiven Übertragen der dreidimensionalen Bildinformationen in einer Richtung, die den dritten Anblickpunkt beinhaltet, von dem bestimmten Übertragungsstartpunkt an ein Informationsverarbeitungsendgerät.
  10. Informationsverarbeitungsvorrichtung nach Anspruch 1, wobei die Steuereinheit die Zuordnung von Daten, die an ein erstes Informationsverarbeitungsterminal des ersten Benutzers und ein zweites Informationsverarbeitungsterminal des zweiten Benutzers übertragen werden sollen, berechnet und eine Steuerung durchführt zum Übertragen verschiedener Datenstücke für das erste Informationsverarbeitungsendgerät und das zweite Informationsverarbeitungsendgerät zum Zeitpunkt des Übertragens der dreidimensionalen Bildinformationen an das erste Informationsverarbeitungsendgerät und das zweite Informationsverarbeitungsendgerät vorzugsweise von dem bestimmten Übertragungsstartpunkt aus.
  11. Informationsverarbeitungsvorrichtung nach Anspruch 1, wobei die Steuereinheit bestimmt, ob ein Abstand zwischen dem ersten Benutzer und dem zweiten Benutzer innerhalb eines vorbestimmten Bereichs liegt, und in einem Fall, in dem die Entfernung innerhalb des vorbestimmten Bereichs liegt, eine Bestimmungssteuerung für den Übertragungsstartpunkt durchführt, basierend auf den Positionsinformationen und den Sichtlinieninformationen des ersten Benutzers, den Positionsinformationen und den Sichtlinieninformationen des zweiten Benutzers und den Anzeigepositionsinformationen der dreidimensionalen Bildinformationen.
  12. Informationsverarbeitungsverfahren, das von einem Prozessor durchgeführt wird, wobei das Informationsverarbeitungsverfahren Folgendes umfasst: Durchführen einer Steuerung zum Bestimmen eines Übertragungsstartpunkts von dreidimensionalen Bildinformationen basierend auf Positionsinformationen und Sichtlinieninformationen eines ersten Benutzers, Positionsinformationen und Sichtlinieninformationen eines zweiten Benutzers, und Anzeigen von Positionsinformationen der dreidimensionalen Bildinformationen, die vom ersten Benutzer und vom zweiten Benutzer gemeinsam genutzt und betrachtet werden.
  13. Computerprogramm zum Bewirken, dass ein Computer als eine Steuereinheit fungiert, die ausgelegt ist zum Durchführen einer Steuerung zum Bestimmen eines Übertragungsstartpunkts von dreidimensionalen Bildinformationen basierend auf Positionsinformationen und Sichtlinieninformationen eines ersten Benutzers, Positionsinformationen und Sichtlinieninformationen eines zweiten Benutzers, und Anzeigen von Positionsinformationen der dreidimensionalen Bildinformationen, die vom ersten Benutzer und vom zweiten Benutzer gemeinsam genutzt und betrachtet werden.
DE112018005954.5T 2017-11-21 2018-08-30 Informationsverarbeitungsvorrichtung, informationsverarbeitungsverfahren und computerprogramm Pending DE112018005954T5 (de)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2017223491 2017-11-21
JP2017-223491 2017-11-21
PCT/JP2018/032247 WO2019102676A1 (ja) 2017-11-21 2018-08-30 情報処理装置、情報処理方法、およびプログラム

Publications (1)

Publication Number Publication Date
DE112018005954T5 true DE112018005954T5 (de) 2020-08-20

Family

ID=66631408

Family Applications (1)

Application Number Title Priority Date Filing Date
DE112018005954.5T Pending DE112018005954T5 (de) 2017-11-21 2018-08-30 Informationsverarbeitungsvorrichtung, informationsverarbeitungsverfahren und computerprogramm

Country Status (5)

Country Link
US (1) US11240482B2 (de)
JP (1) JP7196856B2 (de)
CN (1) CN111344776B (de)
DE (1) DE112018005954T5 (de)
WO (1) WO2019102676A1 (de)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113138734A (zh) * 2020-01-20 2021-07-20 北京芯海视界三维科技有限公司 用于显示的方法、装置和产品

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10275247A (ja) * 1997-02-03 1998-10-13 Fujitsu Ltd 仮想世界記述データ表示方法
JPH11237867A (ja) * 1998-02-20 1999-08-31 Shimadzu Corp 仮想空間表示装置
JP3653463B2 (ja) 2000-11-09 2005-05-25 日本電信電話株式会社 複数のユーザによる仮想空間共有システム
JP4704558B2 (ja) * 2000-12-25 2011-06-15 三菱電機株式会社 ３次元空間データ送信表示システム、３次元空間データ送信方法、３次元空間データ送信方法をコンピュータに実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体、３次元空間データ送信表示方法、及び３次元空間データ送信表示方法をコンピュータに実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体
JP2002279449A (ja) * 2001-03-19 2002-09-27 Mitsubishi Electric Corp ３次元空間データ送信表示装置、３次元空間データ送信方法、３次元空間データ送信方法をコンピュータに実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体
JP2005050081A (ja) * 2003-07-28 2005-02-24 Matsushita Electric Ind Co Ltd ３次元仮想空間情報を共有する通信装置
JP2006054830A (ja) * 2004-08-16 2006-02-23 Sony Corp 画像圧縮通信方法及び装置
JP2011066507A (ja) * 2009-09-15 2011-03-31 Toshiba Corp 画像処理装置
US9348141B2 (en) * 2010-10-27 2016-05-24 Microsoft Technology Licensing, Llc Low-latency fusing of virtual and real content
US10955665B2 (en) * 2013-06-18 2021-03-23 Microsoft Technology Licensing, Llc Concurrent optimal viewing of virtual objects
JP6610546B2 (ja) * 2014-07-03 2019-11-27 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
JP6298432B2 (ja) * 2015-10-19 2018-03-20 株式会社コロプラ 画像生成装置、画像生成方法、及び画像生成プログラム
EP3416392A4 (de) 2016-02-09 2019-09-18 Sony Interactive Entertainment Inc. Videoanzeigesystem
CN106445129A (zh) * 2016-09-14 2017-02-22 乐视控股（北京）有限公司 全景图像信息显示方法、装置及系统
CN106997281A (zh) 2017-04-10 2017-08-01 北京小米移动软件有限公司 共享虚拟对象的方法及智能设备

Also Published As

Publication number Publication date
JP7196856B2 (ja) 2022-12-27
US11240482B2 (en) 2022-02-01
CN111344776B (zh) 2023-06-02
US20200396438A1 (en) 2020-12-17
CN111344776A (zh) 2020-06-26
JPWO2019102676A1 (ja) 2020-12-24
WO2019102676A1 (ja) 2019-05-31

Similar Documents

Publication Publication Date Title
DE112016004216T5 (de) Allgemeine Sphärische Erfassungsverfahren
DE102009049849A1 (de) Verfahren zur Bestimmung der Pose einer Kamera und zur Erkennung eines Objekts einer realen Umgebung
DE102018132428A1 (de) Photomosaische Bodenkartierung
DE202013012457U1 (de) Digitale Vorrichtung
DE202011110900U1 (de) Systeme zum Sammeln und Bereitstellen von Kartenbildern
DE112017000017T5 (de) Kameraeinstellungsanpassung basierend auf vorhergesagten umgebungsfaktoren und nachverfolgungssysteme, die diese einsetzen
DE202015009198U1 (de) Auswahl der zeitlich verteilten Panoramabilder für die Anzeige
DE112018006666T5 (de) Informationsverarbeitungsgerät, informationsverarbeitungsverfahren und programm
DE102019102866A1 (de) Identifizierung eines Herstellungsteils unter Verwendung von Computervision und Maschinenlernen
DE112018005075T5 (de) Informationsverarbeitungsvorrichtung, informationsverarbeitungsverfahren und programm
DE202017007296U1 (de) Elektronische Vorrichtung, umfassend einen gebogenen Anzeigebereich
DE112016002022T5 (de) Managen von merkmalsdaten zur umgebungsabbildung auf einer elektronischen vorrichtung
DE112016006213T5 (de) System und Verfahren zum Fusionieren von Ausgängen von Sensoren, die unterschiedliche Auflösungen aufweisen
DE112018004313T5 (de) Informationsverarbeitungsvorrichtung, informationsverarbeitungsverfahren und programm
DE112016001829T5 (de) Automatische Verbindung von Bildern unter Verwendung visueller Eigenschaftsquerverweise auf zugehörige Anwendungen
DE112016001304T5 (de) Detektieren des Ortes einer Mobilvorrichtung basierend auf semantischen Indikatoren
DE112017006836T5 (de) Informationsverarbeitungsgerät, informationsverarbeitungsverfahren und programm
DE102017012116A1 (de) Vorschauerzeugung aus panoramischen Bildern
DE102017111440A1 (de) Universalgateway für automatisiertes lernen
DE202018006527U1 (de) Erfassung und Signalisieren von Zuständen eines unbemannten Fluggeräts
DE102021204765A1 (de) Rendern von Augmented-Reality mit Verdeckung
DE112015003263T5 (de) Bildmodifikation
DE102022122084A1 (de) Umgebungs-Mapping basierend auf UWB-Tags
DE112018005641T5 (de) Informationsverarbeitungsgerät, informationsverarbeitungsverfahren und programm
DE112021007303T5 (de) Geräte zur gestenerkennung mit ultra-breitband (uwb) transceivern

Legal Events

Date Code Title Description
R409 Internal rectification of the legal status completed