IT201900013200A1 - Sistema di interazione multimediale, particolarmente per applicazioni turistiche e ludiche - Google Patents

Sistema di interazione multimediale, particolarmente per applicazioni turistiche e ludiche Download PDF

Info

Publication number
IT201900013200A1
IT201900013200A1 IT102019000013200A IT201900013200A IT201900013200A1 IT 201900013200 A1 IT201900013200 A1 IT 201900013200A1 IT 102019000013200 A IT102019000013200 A IT 102019000013200A IT 201900013200 A IT201900013200 A IT 201900013200A IT 201900013200 A1 IT201900013200 A1 IT 201900013200A1
Authority
IT
Italy
Prior art keywords
user
multimedia
control unit
multimedia device
image acquisition
Prior art date
Application number
IT102019000013200A
Other languages
English (en)
Inventor
Potito Decimo
Sapegno Lorenzo Barbone
Massimiliano Soresini
Original Assignee
Uocy Italy S R L
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Uocy Italy S R L filed Critical Uocy Italy S R L
Priority to IT102019000013200A priority Critical patent/IT201900013200A1/it
Publication of IT201900013200A1 publication Critical patent/IT201900013200A1/it

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Telephonic Communication Services (AREA)

Description

DESCRIZIONE dell’invenzione industriale dal titolo: “Sistema di interazione multimediale, particolarmente per applicazioni turistiche e ludiche”
DESCRIZIONE
Settore tecnico
La presente invenzione si colloca, in generale, nel settore sistemi multimediali di intrattenimento; in particolare, l’invenzione si riferisce ad un sistema di interazione multimediale, particolarmente per applicazioni turistiche e ludiche, indossabile da un utente.
Tecnica nota
Nella tecnica nota, per realtà aumentata, o realtà mediata dall'elaboratore, si intende l'arricchimento della percezione sensoriale umana mediante informazioni, in genere manipolate e convogliate elettronicamente, che non sarebbero percepibili con i cinque sensi. Il cruscotto dell'automobile, l'esplorazione della città puntando lo smartphone o la chirurgia robotica a distanza sono tutti esempi di realtà aumentata.
Un esempio di realtà aumentata nota è rappresentato dalla realtà aumentata su smartphone. Lo smartphone è dotato necessariamente di un sistema di Posizionamento Globale GPS, di una bussola e deve poter permettere la visualizzazione di un flusso video in tempo reale. Lo smartphone viene solitamente alloggiato all'interno di appositi caschetti che, una volta indossati, dispongono lo schermo dello smartphone di fronte agli occhi dell'utente e fan sì che l'utente non possa osservare direttamente il mondo esterno.
Con lo smartphone si inquadra in tempo reale, tramite videocamera, l'ambiente circostante e al mondo reale vengono sovrapposti i livelli di contenuto, dai dati da Punti di Interesse (POI) geolocalizzati a elementi 3D.
Sullo schermo dello smartphone verranno quindi visualizzate le immagini acquisite dalla videocamera dello smartphone, sulle quali verranno ulteriormente sovrapposti i livelli di contenuto.
Svantaggiosamente, l'utente che utilizza tale tecnologia è isolato visivamente dal mondo esterno dato che non in alcun modo vedere direttamente il mondo che lo circonda. L'utente che usa tale tecnologia risulta pertanto esposto a rischi provenienti dal mondo reale, dei quali potrebbe accidentalmente non accorgersene. Ad esempio, se l'utente utilizza tale tecnologia mentre sta camminando per le strade di una città, esso potrebbe non accorgersi dell'arrivo di una autovettura e venire investito.
Inoltre, l'utilizzo di caschetti che isolano l'utente dal mondo esterno presentano lo svantaggio di ingenerare un effetto di nausea all'utente dopo un determinato periodo di utilizzo.
Ulteriormente, la qualità percepita dall'utente è molto bassa dato che il mondo circostante viene riprodotto su uno schermo dello smartphone, con conseguente perdita di definizione e qualità dell'immagine.
Sintesi dell’invenzione
Uno scopo della presente invenzione è dunque quello di fornire un sistema di interazione multimediale che fornisca una esperienza migliorata ad utente, andando ad incrementare la qualità percepita e eliminando gli inconvenienti delle soluzioni note, quali l'eliminazione dei rischi provenienti dal mondo reale e l'eliminazione del senso di nausea solitamente generato.
I suddetti ed altri scopi e vantaggi sono raggiunti, secondo un aspetto dell’invenzione, da un sistema di interazione multimediale, particolarmente per applicazioni turistiche e ludiche, avente le caratteristiche definite nella rivendicazione 1. Forme di attuazione preferenziali dell’invenzione sono definite nelle rivendicazioni dipendenti, il cui contenuto è da intendersi come parte integrante della presente descrizione.
Breve descrizione dei disegni
Verranno ora descritte le caratteristiche funzionali e strutturali di alcune forme di realizzazione preferite di un sistema di interazione multimediale, particolarmente per applicazioni turistiche e ludiche, secondo l’invenzione. Si fa riferimento ai disegni allegati, in cui:
- la figura 1 illustra una forma di realizzazione di un sistema di interazione multimediale, particolarmente per applicazioni turistiche e ludiche secondo l'invenzione;
- la figura 2 illustra in dettaglio un dispositivo multimediale del sistema di interazione multimediale di figura 1; e
- la figura 3 illustra in dettaglio un dispositivo di comando del sistema di interazione multimediale di figura 1.
Descrizione dettagliata
Prima di spiegare nel dettaglio una pluralità di forme di realizzazione dell’invenzione, va chiarito che l’invenzione non è limitata nella sua applicazione ai dettagli costruttivi e alla configurazione dei componenti presentati nella seguente descrizione o illustrati nei disegni. L’invenzione è in grado di assumere altre forme di realizzazione e di essere attuata o realizzata praticamente in diversi modi. Si deve anche intendere che la fraseologia e la terminologia hanno scopo descrittivo e non vanno intese come limitative. L’utilizzo di “includere” e “comprendere” e le loro variazioni sono da intendersi come ricomprendenti gli elementi enunciati a seguire e i loro equivalenti, così come anche elementi aggiuntivi e gli equivalenti di questi.
Facendo inizialmente riferimento alla figura 1, un sistema di interazione multimediale 1 secondo l'invenzione, particolarmente per applicazioni turistiche e ludiche, è predisposto per essere indossato da un utente e comprende un dispositivo multimediale 3 da indossare sulla testa da un'utente.
Ad esempio, il dispositivo multimediale 3 può essere un caschetto indossabile.
Il sistema di interazione multimediale 1 comprende inoltre un mezzo di rilevamento di movimento per rilevare il movimento del dispositivo multimediale.
Con movimento del dispositivo multimediale si può ad esempio intendere un movimento lungo uno qualsiasi degli assi x, y, z indicati in figura 1 e la rotazione (r, p, y) sempre lungo uno o più assi. In tal modo sarà possibile apprendere quando l'utente ruota, inclina o sposta la testa, quando esso indossa il dispositivo multimediale 3. Il mezzo di rilevamento di movimento può essere un giroscopio associato al dispositivo multimediale 3.
Inoltre, il sistema di interazione multimediale 1 comprende una unità di controllo 7 per il controllo del dispositivo multimediale 3, un mezzo di alimentazione 9 per l'alimentazione del dispositivo multimediale 3 e dell'unità di controllo 7.
Il sistema di interazione multimediale 1 comprende ulteriormente un dispositivo di comando 11 per consentire all'utente di impartire comandi da trasmettere all'unità di controllo 7 per il controllo del dispositivo multimediale 3, e un mezzo di localizzazione 5 per rilevare una informazione sulla posizione dell'utente da trasmettere all'unità di controllo 7. Il dispositivo di comando 11 può comprendere almeno uno tra una pluralità di pulsanti 20 e un display touch 22 attraverso cui l'utente può impartire comandi. Il dispositivo di comando 11 può inoltre comunicare tramite una comunicazione senza fili con l'unità di controllo 7 in modo da non creare impedimenti all'utente durante l'utilizzo.
Tramite il mezzo di localizzazione 5 sarà quindi possibile monitorare i movimenti dell'utente all'interno di un luogo chiuso, quale ad esempio un museo, o in un luogo aperto, quale in una città o in un parco turistico. Il mezzo di localizzazione 5 può essere un GPS.
Sempre osservando figura 1, il dispositivo multimediale 3 comprende un dispositivo visore di realtà mista 13 e almeno un dispositivo di acquisizione di immagini 15.
Con realtà mista si intende il mescolamento tra la realtà fisica e la realtà virtuale, utilizzando anche la realtà aumentata, sovrapponendole. Nella realtà mista l'utente può osservare il mondo reale che lo circonda ma anche vedere e muovere oggetti virtuali come fossero reali. Il dispositivo visore di realtà mista 13 può essere un occhiale di tipo See-Through Screen.
L'unità di controllo 7 è configurata per selezionare un contenuto visivo da mostrare all'utente tramite il dispositivo visore di realtà mista 13, in funzione di almeno uno tra comandi ricevuti dal dispositivo di comando 11, l'informazione ricevuta dal mezzo di localizzazione 5, movimenti del dispositivo multimediali rilevati dal mezzo di rilevamento di movimento e immagini acquisite dal dispositivo di acquisizione di immagini 15.
In altre parole, l'unità di controllo può mostrare all'utente un contenuto visivo tramite il visore di realtà mista, a seconda che l'utente abbia impartito un determinato comando tramite il dispositivo di comando, che il sistema rilevi un movimento del dispositivo multimediale 3 (e quindi della testa dell'utente, che l'utente si sia spostato all'interno del luogo chiuso o aperto, e che l'immagine acquisita dal dispositivo di acquisizione di immagini 15 corrisponda con una predeterminata immagine, che la sua posizione spaziale (x,y,z,r,p,y) sia in una determinata zone interna o esterna.
Il contenuto visivo può essere, ad esempio, un ologramma tridimensionale, un video, particolarmente, un filmato di un personaggio storico o di un monumento o di parte di un monumento. Il personaggio storico potrà essere interpretato da attori veri che reciteranno una parte nell'ologramma e/o nel video. Il contenuto visivo può essere ad esempio un personaggio narratore che introduce l'utente all'esperienza che andrà a vivere, un modello tridimensionale interattivo, dinamico o statico, di persone e/o animali e/o cose.
Il dispositivo multimediale 3 può comprendere inoltre un dispositivo di riproduzione sonora 17 e l'unità di controllo 7 può essere inoltre configurata per selezionare un contenuto sonoro da riprodurre all'utente tramite il dispositivo di riproduzione sonora 17, in funzione di almeno uno tra comandi ricevuti dal dispositivo di comando 11, l'informazione ricevuta dal mezzo di localizzazione 4, movimenti del dispositivo multimediali rilevati dal mezzo di rilevamento di movimento e le immagini acquisite dal dispositivo di acquisizione di immagini 15.
In questo modo l'esperienza provata dall'utente sarà ancora più reale in quanto il contenuto visivo ricevuto tramite il dispositivo visore di realtà mista potrà essere accompagnato da un contenuto sonoro. In alcuni frangenti l'utente potrà anche ricevere contenuti sonori senza che il dispositivo visore di realtà mista mostri contenuti visivi. Il contenuto sonoro potrò ad esempio essere un dialogo del personaggio mostrato o una spiegazione calata nel contesto in cui si sta muovendo l'utente.
Il dispositivo di acquisizione di immagini 5 può essere una telecamera RGB ad alta definizione o una telecamera a infrarossi stereoscopica. La telecamera RGB ad alta definizione serve per il riconoscimento di un'area prossima all'utente, e.g. entro una predeterminata distanza, mentre la telecamera a infrarossi stereoscopica serve per il riconoscimento dell'area circostante.
In una forma di realizzazione, i dispositivi di acquisizione 5 di immagini possono essere due, in particolare un primo dispositivo di acquisizione 5A di immagini può essere una telecamera RGB ad alta definizione e il secondo dispositivo di acquisizione 5B di immagini può essere una telecamera a infrarossi stereoscopica oppure una coppia di telecamere stereoscopiche che eseguono scansioni 3d in tempo reale.
Durante l'utilizzo, l'unità di controllo 7, il mezzo di alimentazione 9 possono essere alloggiati all'interno di un apposito zainetto o contenitore 20 che potrà essere indossato dall'utente durante l'esperienza.
Il vantaggio conseguito è dunque quello di aver fornito un sistema di interazione multimediale che fornisce una esperienza migliorata ad utente, andando ad incrementare la qualità percepita e eliminando gli inconvenienti delle soluzioni note, quali l'eliminazione dei rischi provenienti dal mondo reale e l'eliminazione del senso di nausea solitamente generato.
Sono stati descritti diversi aspetti e forme di realizzazione di un sistema di interazione multimediale, particolarmente per applicazioni turistiche e ludiche secondo l’invenzione. Si intende che ciascuna forma di realizzazione può essere combinata con qualsiasi altra forma di realizzazione.
L’invenzione, inoltre, non è limitata alle forme di realizzazione descritte, ma potrà essere variata entro l’ambito definito dalle rivendicazioni annesse.

Claims (10)

  1. RIVENDICAZIONI 1. Sistema di interazione multimediale (1), particolarmente per applicazioni turistiche e ludiche, predisposto per essere indossato da un utente e comprendente: - un dispositivo multimediale (3) predisposto per essere indossato sulla testa dall'utente; - un mezzo di rilevamento di movimento predisposto per rilevare il movimento del dispositivo multimediale; - una unità di controllo (7) predisposta per il controllo del dispositivo multimediale (3); - un mezzo di alimentazione (9) predisposto per alimentare il dispositivo multimediale (3) e l'unità di controllo (7); - un dispositivo di comando (11) predisposto per consentire all'utente di impartire comandi da trasmettere all'unità di controllo (7) per il controllo del dispositivo multimediale (3); - un mezzo di localizzazione (5) predisposto per rilevare una informazione sulla posizione dell'utente da trasmettere all'unità di controllo (7); in cui, il dispositivo multimediale (3) comprende un dispositivo visore di realtà mista (13) e almeno un dispositivo di acquisizione di immagini (15); l'unità di controllo (7) è configurata per selezionare un contenuto visivo da mostrare all'utente tramite il dispositivo visore di realtà mista (13), in funzione di almeno uno tra comandi ricevuti dal dispositivo di comando (11), l'informazione ricevuta dal mezzo di localizzazione (5), movimenti del dispositivo multimediali rilevati dal mezzo di rilevamento di movimento e immagini acquisite dal dispositivo di acquisizione di immagini (15).
  2. 2. Sistema secondo la rivendicazione 1, in cui il dispositivo multimediale (3) comprende inoltre un dispositivo di riproduzione sonora (17) e l'unità di controllo (7) è inoltre configurata per selezionare un contenuto sonoro da riprodurre all'utente tramite il dispositivo di riproduzione sonora (17), in funzione di almeno uno tra comandi ricevuti dal dispositivo di comando (11), l'informazione ricevuta dal mezzo di localizzazione (4), movimenti del dispositivo multimediali rilevati dal mezzo di rilevamento di movimento e le immagini acquisite dal dispositivo di acquisizione di immagini (15).
  3. 3. Sistema secondo la rivendicazione 1 o 2, in cui il dispositivo di acquisizione di immagini (5) è una telecamera RGB ad alta definizione o una telecamera a infrarossi stereoscopica.
  4. 4. Sistema secondo la rivendicazione 3, in cui i dispositivi di acquisizione di immagini (5) sono due; un primo dispositivo di acquisizione (5A) di immagini è una telecamera RGB ad alta definizione e un secondo dispositivo di acquisizione (5B) di immagini è una telecamera a infrarossi stereoscopica oppure una coppia di telecamere stereoscopiche che eseguono scansioni 3d in tempo reale.
  5. 5. Sistema secondo una qualsiasi delle precedenti rivendicazioni, in cui il mezzo di localizzazione (5) è un GPS.
  6. 6. Sistema secondo una qualsiasi delle precedenti rivendicazioni, in cui il mezzo di rilevamento di movimento è un giroscopio associato al dispositivo multimediale (3).
  7. 7. Sistema secondo una qualsiasi delle precedenti rivendicazioni, in cui il dispositivo visore di realtà mista (13) è un occhiale di tipo lightfield.
  8. 8. Sistema secondo una qualsiasi delle precedenti rivendicazioni, in cui il contenuto visivo è un ologramma video, particolarmente, un filmato di un personaggio storico o di un monumento o di parte di un monumento.
  9. 9. Sistema secondo una qualsiasi delle precedenti rivendicazioni, in cui il dispositivo di comando (11) comprende almeno uno tra una pluralità di pulsanti (20) e un display touch (22).
  10. 10. Sistema secondo una qualsiasi delle precedenti rivendicazioni, in cui il dispositivo di comando (11) comunica tramite una comunicazione senza fili con l'unità di controllo (7).
IT102019000013200A 2019-07-29 2019-07-29 Sistema di interazione multimediale, particolarmente per applicazioni turistiche e ludiche IT201900013200A1 (it)

Priority Applications (1)

Application Number Priority Date Filing Date Title
IT102019000013200A IT201900013200A1 (it) 2019-07-29 2019-07-29 Sistema di interazione multimediale, particolarmente per applicazioni turistiche e ludiche

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
IT102019000013200A IT201900013200A1 (it) 2019-07-29 2019-07-29 Sistema di interazione multimediale, particolarmente per applicazioni turistiche e ludiche

Publications (1)

Publication Number Publication Date
IT201900013200A1 true IT201900013200A1 (it) 2021-01-29

Family

ID=69105946

Family Applications (1)

Application Number Title Priority Date Filing Date
IT102019000013200A IT201900013200A1 (it) 2019-07-29 2019-07-29 Sistema di interazione multimediale, particolarmente per applicazioni turistiche e ludiche

Country Status (1)

Country Link
IT (1) IT201900013200A1 (it)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120249797A1 (en) * 2010-02-28 2012-10-04 Osterhout Group, Inc. Head-worn adaptive display
US20170307891A1 (en) * 2016-04-26 2017-10-26 Magic Leap, Inc. Electromagnetic tracking with augmented reality systems

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120249797A1 (en) * 2010-02-28 2012-10-04 Osterhout Group, Inc. Head-worn adaptive display
US20170307891A1 (en) * 2016-04-26 2017-10-26 Magic Leap, Inc. Electromagnetic tracking with augmented reality systems

Similar Documents

Publication Publication Date Title
RU2771098C2 (ru) Системы и способы для многослойных виртуальных элементов в окружении парка развлечений
CN108369449B (zh) 第三方全息门户
CN104781873B (zh) 图像显示装置、图像显示方法、移动装置、图像显示系统
US9615177B2 (en) Wireless immersive experience capture and viewing
US9703100B2 (en) Change nature of display according to overall motion
US20090046140A1 (en) Mobile Virtual Reality Projector
US10078366B2 (en) Head-mountable apparatus and system
KR20160147735A (ko) 헤드부 위치 검출 장치 및 헤드부 위치 검출 방법, 화상 처리 장치 및 화상 처리 방법, 표시 장치, 및 컴퓨터 프로그램
KR20160111904A (ko) 화상 표시 장치 및 화상 표시 방법
WO2017104320A1 (ja) 画像表示装置
US20130222590A1 (en) Methods and apparatus for dynamically simulating a remote audiovisual environment
CN111103688A (zh) 一种防晕眩设备、系统和方法
US20190121515A1 (en) Information processing device and information processing method
CN108830944B (zh) 光学透视式三维近眼显示系统及显示方法
EP3673348B1 (en) Data processing device, method and non-transitory machine-readable medium for detecting motion of the data processing device
US20180205930A1 (en) Information processing device, information processing method, and program
IT201900013200A1 (it) Sistema di interazione multimediale, particolarmente per applicazioni turistiche e ludiche
Luo et al. Development of a three-dimensional multimode visual immersive system with applications in telepresence
US20220230357A1 (en) Data processing
US20240196045A1 (en) Video display system, observation device, information processing method, and recording medium
IT201900013197A1 (it) Sistema di interazione multimediale per un veicolo
GB2558278A (en) Virtual reality
KR20130023465A (ko) 로봇팔 입체텔레비전
Fiore Enhanced Interaction in Immersive Virtual Environments
Kelley Exploring Virtual Worlds with Head-Mounted Displays