TWI747333B - 基於光通信裝置的交互方法、電子設備以及電腦可讀取記錄媒體 - Google Patents
基於光通信裝置的交互方法、電子設備以及電腦可讀取記錄媒體 Download PDFInfo
- Publication number
- TWI747333B TWI747333B TW109120406A TW109120406A TWI747333B TW I747333 B TWI747333 B TW I747333B TW 109120406 A TW109120406 A TW 109120406A TW 109120406 A TW109120406 A TW 109120406A TW I747333 B TWI747333 B TW I747333B
- Authority
- TW
- Taiwan
- Prior art keywords
- information
- virtual object
- location
- server
- location information
- Prior art date
Links
Images
Abstract
本發明提供一種基於光通信裝置的交互方法包括:伺服器接收來自第一設備與該第一設備的位置有關的資訊;該伺服器通過與該第一設備的位置有關的資訊獲得該第一設備的位置資訊;該伺服器設置與該第一設備相關聯的具有空間位置資訊的虛擬物件,其中,該虛擬物件的空間位置資訊基於該第一設備的位置資訊而確定;該伺服器將與該虛擬物件有關的資訊發送給第二設備,該資訊中包括該虛擬物件的空間位置資訊,其中,與該虛擬物件有關的資訊能夠被該第二設備使用以基於其通過光通信裝置確定的位置資訊和姿態資訊在其顯示媒介上呈現該虛擬物件。
Description
本發明屬於資訊交互領域,尤其涉及一種基於光通信裝置的交互方法、電子設備以及電腦可讀取記錄媒體。
本部分的陳述僅僅是為了提供與本發明相關的背景資訊,以説明理解本發明,這些背景資訊並不一定構成現有技術。
隨著網際網路(互聯網)的廣泛普及,各個行業都在嘗試利用網際網路平臺來發展新的服務提供方式,“互聯網+”成為了研究熱點。一種廣泛應用的服務方式是基於位置的服務,在許多應用場景中,使用者或服務提供者中的一方必須知道對方的準確位置才能進行便捷的服務交互。然而,現有技術並不能很好地解決該問題。
以即時快遞服務為例,使用者在戶外的某個位置通過網路從某個餐廳訂餐之後,可以等待送餐員將食物送到該位置。但是,用戶提供的位置通常是不太精確的位置(例如,某個路口、某個街道、某個公園等),即使是精確位置,也可能由於附近人員較多,導致送餐員很難確定周圍哪個人才是訂餐的用戶,從而不得不與使用者進行反復的電話溝通。
另一個基於位置的服務的示例是餐廳就餐。在用戶點完餐之後,相應的桌號和點餐資訊會由餐廳記錄。在菜品準備好之後,負責送餐的店員會將菜品送到相應桌號的餐桌。為此,店員需要牢記每個桌號的位置,以便能夠準確、快捷地向餐桌送餐。但是,這種僅僅依靠店員記憶的方式在許多情況下容易發生差錯(特別是餐廳規模較大的情況下),導致出現菜品的誤送,或者需要店員在送達菜品時與用戶進行確認。
為了解決上述問題,本申請提出了一種基於光通信裝置的交互方法和電子設備。
本發明的一個方面涉及一種基於光通信裝置的交互方法,包括:伺服器接收來自第一設備的與所述第一設備的位置有關的資訊;所述伺服器通過與所述第一設備的位置有關的資訊獲得所述第一設備的位置資訊;所述伺服器設置與所述第一設備相關聯的具有空間位置資訊的虛擬物件,其中,所述虛擬物件的空間位置資訊基於所述第一設備的位置資訊而確定;所述伺服器將與所述虛擬物件有關的資訊發送給第二設備,該資訊中包括所述虛擬物件的空間位置資訊,其中,與所述虛擬物件有關的資訊能夠被所述第二設備使用以基於該第二設備通過光通信裝置確定的位置資訊和姿態資訊在該第二設備顯示媒介上呈現所述虛擬物件。
進一步地,通過與所述第一設備的位置有關的資訊獲得所述第一設備的位置資訊包括以下至少之一:從與所述第一設備的位置有關的資訊中提取所述第一設備的位置資訊;通過分析與所述第一設備的位置有關的資訊來獲得所述第一設備的位置資訊;或者,使用與所述第一設備的位置有關的資訊通過查詢來獲得所述第一設備的位置資訊。
進一步地,與所述第一設備的位置有關的資訊包括所述第一設備相對於光通信裝置的位置資訊,其中,所述第一設備通過使用圖像採集器件採集包括所述光通信裝置的圖像並分析該圖像來確定該第一設備相對於所述光通信裝置的位置資訊。
進一步地,所述第二設備通過使用圖像採集器件採集包括光通信裝置的圖像並分析該圖像來確定該第二設備位置資訊和/或姿態資訊。
進一步地,所述方法還包括:在所述伺服器將與虛擬物件有關的資訊發送給第二設備之前,所述伺服器確定需要在所述第二設備的顯示媒介上呈現的與一個或多個第一設備關聯的一個或多個虛擬物件。
進一步地,所述方法還包括:所述伺服器接收來自第一設備的新的與所述第一設備的位置有關的資訊;所述伺服器基於所述新的與所述第一設備的位置有關的資訊更新所述第一設備的位置資訊;所述伺服器基於更新後的所述第一設備的位置資訊更新所述虛擬物件的空間位置資訊;以及,所述伺服器將更新後的所述虛擬物件的空間位置資訊發送給所述第二設備,以便所述第二設備能夠基於該第二設備位置資訊和姿態資訊以及所述更新後的所述虛擬物件的空間位置資訊在該第二設備顯示媒介上呈現或更新所述虛擬物件。
進一步地,所述方法還包括:所述伺服器接收來自所述第二設備的與所述第二設備的位置有關的資訊,並確定所述第二設備的位置資訊;所述伺服器設置與所述第二設備相關聯的具有空間位置資訊的另一虛擬物件,其中,該另一虛擬物件的空間位置資訊基於所述第二設備的位置資訊而確定;以及所述伺服器將與該另一虛擬物件有關的資訊發送給所述第一設備,該資訊中包括該另一虛擬物件的空間位置資訊,其中,與該另一虛擬物件有關的資訊能夠被所述第一設備使用以基於該第一設備位置資訊和姿態資訊在該第一設備顯示媒介上呈現該另一虛擬物件。
進一步地,在所述伺服器將與所述虛擬物件有關的資訊發送給所述第二設備之前,還包括:所述伺服器將來自所述第一設備的資訊或該資訊一部分提供給所述第二設備;以及,所述伺服器接收所述第二設備對來自所述第一設備的資訊或該資訊一部分的回應。
進一步地,所述方法還包括:所述伺服器獲得所述第一設備的屬性資訊;以及所述伺服器基於所述第一設備的屬性資訊設置與所述第一設備相關聯的所述虛擬物件,其中,所述第一設備的屬性資訊包括與所述第一設備有關的資訊、與所述第一設備的使用者有關的資訊、和/或所述第一設備的使用者自訂的資訊。
進一步地,所述第一設備的位置資訊是相對於光通信裝置的位置資訊、在場所坐標系中的位置資訊、或者在世界坐標系中的位置資訊;和/或,所述第二設備的位置資訊和姿態資訊是相對於光通信裝置的位置資訊和姿態資訊、在場所坐標系中的位置資訊和姿態資訊、或者在世界坐標系中的位置資訊和姿態資訊。
進一步地,與所述第一設備的位置資訊相關聯的光通信裝置和與所述第二設備的位置資訊相關聯的光通信裝置是相同的光通信裝置或者不同的光通信裝置,其中,所述不同的光通信裝置具有確定的相對位姿關係。
進一步地,所述虛擬物件的姿態能夠根據所述第二設備相對於所述虛擬物件的位置和/或姿態變化而調整。
本發明的另一個方面涉及一種電腦可讀取記錄媒體,其中存儲有電腦程式,在所述電腦程式被處理器執行時,能夠用於實現上述方法。
本發明的另一個方面涉及一種電子設備,包括處理器和記憶體,所述記憶體中存儲有電腦程式,在所述電腦程式被處理器執行時,能夠用於實現上述方法。
為了使本發明的目的、技術方案及優點更加清楚明白,以下結合附圖通過具體實施例對本發明進一步詳細說明。應當理解,此處所描述的具體實施例僅僅用以解釋本發明,並不用於限定本發明。
光通信裝置也稱為光標籤,這兩個術語在本文中可以互換使用。光標籤能夠通過發出不同的光來傳遞資訊,其具有識別距離遠、可見光條件要求寬鬆的優勢,並且光標籤所傳遞的資訊可以隨時間變化,從而可以提供大的資訊容量和靈活的配置能力。
光標籤中通常可以包括控制器和至少一個光源,該控制器可以通過不同的驅動模式來驅動光源,以向外傳遞不同的資訊。圖1示出了一種示例性的光標籤100,其包括三個光源(分別是第一光源101、第二光源102、第三光源103)。光標籤100還包括控制器(在圖1中未示出),其用於根據要傳遞的資訊為每個光源選擇相應的驅動模式。例如,在不同的驅動模式下,控制器可以使用不同的驅動信號來控制光源的發光方式,從而使得當使用具有成像功能的設備拍攝光標籤100時,其中的光源的圖像可以呈現出不同的外觀(例如,不同的顏色、圖案、亮度、等等)。通過分析光標籤100中的光源的成像,可以解析出各個光源此刻的驅動模式,從而解析出光標籤100此刻傳遞的資訊。
為了基於光標籤向使用者提供相應的服務,每個光標籤可以被分配一個標識資訊(ID),該標識資訊用於由光標籤的製造者、管理者或使用者等唯一地識別或標識光標籤。通常,可由光標籤中的控制器驅動光源以向外傳遞該標識資訊,而使用者可以使用設備對光標籤進行圖像採集來獲得該光標籤傳遞的標識資訊,從而可以基於該標識資訊來訪問相應的服務,例如,訪問與光標籤的標識資訊相關聯的網頁、獲取與標識資訊相關聯的其他資訊(例如,與該標識資訊對應的光標籤的位置資訊)、等等。設備可以通過其上的攝像頭對光標籤進行圖像採集來獲得包含光標籤的圖像,並通過內置的應用程式來分析每張圖像中的光標籤(或光標籤中的各個光源)的成像以識別出光標籤傳遞的資訊。
光標籤可以安裝於固定的位置,並可以將光標籤的標識資訊(ID)以及任何其他資訊(例如位置資訊)存儲於伺服器中。在現實中,可以將大量的光標籤構建成一個光標籤網路。圖2示出了一種示例性的光標籤網路,該光標籤網路包括多個光標籤和至少一個伺服器,其中,與每個光標籤相關的資訊可保存在伺服器上。例如,可以在伺服器上保存每個光標籤的標識資訊(ID)或任何其他資訊,例如與該光標籤相關的服務資訊、與該光標籤相關的描述資訊或屬性,如光標籤的位置資訊、物理尺寸資訊、物理形狀資訊、姿態或朝向資訊等。設備可以使用識別出的光標籤的標識資訊來從伺服器查詢獲得與該光標籤有關的其他資訊。光標籤的位置資訊可以是指該光標籤在物理世界中的實際位置,其可以通過地理座標資訊來指示。伺服器可以是在計算裝置上運行的軟體程式、一台計算裝置或者由多台計算裝置構成的集群。光標籤可以是離線的,也即,光標籤不需要與伺服器進行通信。當然,可以理解,能夠與伺服器進行通信的線上光標籤也是可行的。
圖3示出了在一個餐廳門的上方佈置的光標籤。當使用者使用設備掃描該光標籤時,可以識別該光標籤傳遞的標識資訊,並可以使用該標識資訊來訪問相應的服務,例如,訪問與光標籤的標識資訊相關聯的該餐廳的網頁。可以根據需要將光標籤部署在各種地方,例如,廣場上、商店門面上、餐廳中。
可以將光標籤作為錨點,來實現虛擬物件到現實場景的疊加,以例如使用該虛擬物件來準確地標識現實場景中的使用者或設備所在的位置。虛擬物件例如可以是圖示、圖片、文字、數位、表情符號、虛擬的三維物體、三維場景模型、一段動畫、一段視頻、等等。
以即時快遞服務為例進行說明,攜帶有設備(例如手機、智慧眼鏡等)的用戶在商業街步行時,其可能想購買一杯咖啡,並在原地等待咖啡店的店員將咖啡送到其位置。該使用者可以使用其設備掃描並識別佈置在其周圍的某個咖啡廳門面上的光標籤,並通過所識別的光標籤標識資訊來訪問相應的服務以購買一杯咖啡。在使用者使用其設備掃描光標籤時,可以拍攝光標籤的圖像,並通過分析該圖像進行相對定位,以確定出用戶(更準確地說,使用者的設備)相對於光標籤的位置資訊,該相對位置資訊可以與咖啡購買請求一起被發送到咖啡廳的伺服器。咖啡廳的伺服器在接收到用戶的咖啡購買請求後,可以設置一個虛擬物件,該虛擬物件例如可以是與該咖啡購買請求對應的訂單號“123”。伺服器還可以根據所接收到的使用者設備相對於光標籤的位置資訊來確定虛擬物件的空間位置資訊,例如可以將虛擬物件的位置設定為使用者設備所在的位置或者在使用者設備所在位置上方1米處。當咖啡廳準備好用戶的咖啡之後,咖啡廳的店員可以進行咖啡配送。圖4示出了店員給用戶配送咖啡的示意圖。在配送過程中,店員可以使用其設備(例如,手機、智慧眼鏡等)掃描光標籤,以確定店員的設備相對於光標籤的位置資訊和姿態資訊。伺服器可以在店員使用其設備掃描光標籤時或在其他時間將虛擬物件的相關資訊(包括其空間位置資訊)發送給店員的設備。如此,可以以光標籤作為中間錨點來確定虛擬物件相對於店員設備的位置關係,並進一步基於店員設備的姿態,在店員設備的顯示媒介上的合適位置處呈現虛擬物件(例如,數位序列“123”)。例如,可以在店員設備的顯示幕上展示的現實場景中的合適位置處疊加數字序列“123”,該數位序列“123”所在的位置或其下方1米左右的位置即為咖啡購買者所在的位置。圖5示出了在店員設備的顯示媒介上疊加虛擬物件的示意圖。如此,可以使用光標籤作為錨點來實現虛擬物件在現實場景中的準確疊加,從而幫助咖啡廳店員迅速地找到咖啡購買者所在的位置,以實現咖啡的遞送。在一個實施例中,咖啡廳店員在配送過程中可以使用智慧眼鏡而不是手機,以實現更方便的遞送。
再以餐廳送餐服務為例進行說明,攜帶有設備的使用者在餐廳就餐時,可以使用其設備掃描並識別佈置在餐廳內的某個光標籤,並通過所識別的光標籤標識資訊來訪問相應的點餐服務。在使用者使用其設備掃描光標籤時,可以拍攝光標籤的圖像,並通過分析該圖像進行相對定位,以確定出用戶(更準確地說,使用者的設備)相對於光標籤的位置資訊,該相對位置資訊可以與點餐請求一起被發送到餐廳的伺服器。餐廳的伺服器在接收到用戶的點餐請求後,可以設置一個虛擬物件,該虛擬物件例如可以是與該點餐請求對應的訂單號“456”。伺服器還可以根據所接收到的使用者設備相對於光標籤的位置資訊來確定虛擬物件的空間位置資訊,例如可以將虛擬物件的位置設定為使用者設備所在的位置或者在使用者設備所在位置上方1米處。當餐廳準備好用戶的菜品之後,餐廳的店員可以進行菜品配送。在配送過程中,餐廳店員可以使用其設備(例如,手機、智慧眼鏡等)掃描光標籤,以確定店員的設備相對於光標籤的位置資訊和姿態資訊。伺服器可以在店員使用其設備掃描光標籤時或在其他時間將虛擬物件的相關資訊(包括其空間位置資訊)發送給店員的設備。如此,可以以光標籤作為中間錨點來確定虛擬物件相對於店員設備的位置關係,並進一步基於店員設備的姿態,在店員設備的顯示媒介上的合適位置處呈現虛擬物件(例如,數位序列“456”)。例如,可以在店員設備的顯示幕上展示的現實場景中的合適位置處疊加數字序列“456”,該數位序列“456”所在的位置或其下方1米左右的位置即為菜品所需送達的用戶所在的位置。如此,可以使用光標籤作為錨點來實現虛擬物件在現實場景中的準確疊加,從而幫助餐廳店員迅速地找到點餐者所在的位置。
在一個實施例中,所確定的設備的位置資訊也可以是設備在其他物理坐標系下的位置資訊,該物理坐標系例如可以是場所坐標系(例如,針對某個房間、建築物、園區等建立的坐標系)或者世界坐標系。在這種情況下,光標籤可以具有在該物理坐標系下的位置資訊和姿態資訊,其可以被提前標定和存儲。通過設備相對於光標籤的位置資訊以及光標籤本身在某個物理坐標系下的位置資訊和姿態資訊,可以確定設備在該物理坐標系下的位置資訊。設備可以識別光標籤傳遞的資訊(例如標識資訊),並使用該資訊來獲得(例如通過查詢)光標籤在某個物理坐標系下的位置資訊和姿態資訊。
在一個實施例中,使用者也可以不通過掃描並識別光標籤來進行點餐,而是可以採用任何其他方式進行點餐。使用者也可以不通過拍攝光標籤的圖像來確定其的位置資訊,而是可以通過掃描桌上的二維碼或者直接向餐廳伺服器發送桌號來將其位置告知餐廳伺服器,餐廳伺服器可以預先存儲各個餐桌的位置資訊,並基於使用者所掃描的二維碼的標識資訊或者使用者發送的桌號來確定使用者的位置資訊。
圖6示出了根據一個實施例的基於光標籤的交互方法,該方法包括如下步驟:
步驟601:伺服器接收來自第一設備的資訊,該資訊中包括第一設備的位置資訊。
來自第一設備的資訊可以是第一設備的使用者向伺服器發出的產品購買資訊,但也可以是其他任何資訊。第一設備的位置資訊可以是其相對於光標籤的位置資訊,也可以是其在某個物理坐標系下的位置資訊。第一設備在向伺服器發送其相對於光標籤的位置資訊時,可以一併發送其通過掃描光標籤而識別的該光標籤的標識資訊。
設備可以採用各種方式來確定其相對於光標籤的位置資訊,該相對位置資訊可以包括設備相對於光標籤的距離資訊和方向資訊。在一個實施例中,設備可以通過採集包括光標籤的圖像並分析該圖像來確定其相對於光標籤的位置資訊。例如,設備可以通過圖像中的光標籤成像大小以及可選的其他資訊(例如,光標籤的實際物理尺寸資訊、設備的攝像頭的焦距)來確定光標籤與設備的相對距離(成像越大,距離越近;成像越小,距離越遠)。設備可以使用光標籤的標識資訊從伺服器獲得光標籤的實際物理尺寸資訊,或者光標籤可以具有統一的物理尺寸並在設備上存儲該物理尺寸。設備可以通過包括光標籤的圖像中的光標籤成像的透視畸變以及可選的其他資訊(例如,光標籤的成像位置),來確定設備相對於光標籤的方向資訊。設備可以使用光標籤的標識資訊從伺服器獲得光標籤的物理形狀資訊,或者光標籤可以具有統一的物理形狀並在設備上存儲該物理形狀。在一個實施例中,設備也可以通過其上安裝的深度攝像頭或雙目攝像頭等來直接獲得光標籤與設備的相對距離。設備也可以採用現有的任何其他定位方法來確定其相對於光標籤的位置資訊。
步驟602:伺服器設置與第一設備相關聯的具有空間位置資訊的虛擬物件,其中,該虛擬物件的空間位置資訊基於第一設備的位置資訊而確定。
在接收到來自第一設備的資訊(例如產品購買資訊)後,伺服器可以設置與第一設備相關聯的虛擬物件。該虛擬物件例如可以是第一設備發出的產品購買資訊所對應的訂單號、購買產品的使用者的姓名、所要遞送的貨品的標識資訊、一個簡單的虛擬圖示、等等。虛擬物件的空間位置資訊根據第一設備的位置資訊來確定,該空間位置資訊可以是相對於光標籤的位置資訊,也可以是在其他物理坐標系下的位置資訊。可以將虛擬物件的空間位置簡單地確定為第一設備的位置,也可以將虛擬物件的空間位置確定為其他位置,例如,位於第一設備的位置附近的其他位置。
步驟603:伺服器將與虛擬物件有關的資訊發送給第二設備,該資訊中包括虛擬物件的空間位置資訊。
與虛擬物件有關的資訊是用於描述該虛擬物件的相關資訊,例如可以包括虛擬物件中包含的圖片、文字、數位、圖示等,也可以包括虛擬物件的形狀資訊、顏色資訊、尺寸資訊、姿態資訊等。基於該資訊,設備可以呈現出相應的虛擬物件。與虛擬物件有關的資訊中包括虛擬物件的空間位置資訊,其可以是相對於光標籤的位置資訊(例如,虛擬物件的相對於光標籤的距離資訊和相對於光標籤的方向資訊)。在一個實施例中,與虛擬物件有關的資訊還可以包括虛擬物件的疊加姿態資訊,該疊加姿態資訊可以是虛擬物件相對於光標籤的姿態資訊,也可以是其在現實世界坐標系中的姿態資訊。
在一個實施例中,伺服器可以例如通過無線鏈路直接將與虛擬物件有關的資訊發送給第二設備。在另一個實施例中,第二設備可以在掃描光標籤時識別光標籤傳遞的標識資訊,並使用光標籤的標識資訊來從伺服器獲得與虛擬物件有關的資訊。
步驟604:第二設備基於其通過光標籤確定的位置資訊和姿態資訊以及與虛擬物件有關的資訊,在第二設備的顯示媒介上呈現虛擬物件。
第二設備的位置資訊可以是其相對於光標籤的位置資訊,也可以是其在某個物理坐標系下的位置資訊。第二設備可以採用各種方式來確定其相對於光標籤的位置資訊,如上文在步驟601中描述的各種方式,在此不再贅述。
第二設備可以確定其姿態資訊,該姿態資訊可以用於確定設備拍攝的現實場景的範圍或邊界。第二設備的姿態資訊可以是其相對於光標籤的姿態資訊,也可以是其在某個物理坐標系下的姿態資訊。通過設備相對於光標籤的姿態資訊以及光標籤本身在某個物理坐標系下的位置資訊和姿態資訊,可以確定設備在該物理坐標系下的姿態資訊。通常情況下,設備的姿態資訊實際上是設備的圖像採集器件(例如攝像頭)的姿態資訊。在一個實施例中,第二設備可以掃描光標籤,並且可以根據光標籤的成像來確定其相對於光標籤的姿態資訊,當光標籤的成像位置或成像區域位於第二設備成像視野的中心時,可以認為第二設備當前正對著光標籤。在確定設備的姿態時可以進一步考慮光標籤的成像的方向。隨著第二設備的姿態發生改變,光標籤在第二設備上的成像位置和/或成像方向會發生相應的改變,因此,可以根據光標籤在第二設備上的成像來獲得第二設備相對於光標籤的姿態資訊。
在一個實施例中,也可以以如下方式來確定設備相對於光標籤的位置資訊和姿態資訊(可以統稱為位姿資訊)。具體地,可以根據光標籤建立一個坐標系,該坐標系可以被稱為光標籤坐標系。可以將光標籤上的一些點確定為在光標籤坐標系中的一些空間點,並且可以根據光標籤的物理尺寸資訊和/或物理形狀資訊來確定這些空間點在光標籤坐標系中的座標。光標籤上的一些點例如可以是光標籤的外殼的角、光標籤中的光源的端部、光標籤中的一些標識點、等等。根據光標籤的物體結構特徵或幾何結構特徵,可以在設備相機拍攝的圖像中找到與這些空間點分別對應的像點,並確定各個像點在圖像中的位置。根據各個空間點在光標籤坐標系中的座標以及對應的各個像點在圖像中的位置,結合設備相機的內參資訊,可以計算得到拍攝該圖像時設備相機在光標籤坐標系中的位姿資訊(R,t),其中R為旋轉矩陣,其可以用於表示設備相機在光標籤坐標系中的姿態資訊,t為位移向量,其可以用於表示設備相機在光標籤坐標系中的位置資訊。計算R、t的方法在現有技術中是已知的,例如,可以利用3D-2D的PnP(Perspective-n-Point)方法來計算R、t,為了不模糊本發明,在此不再詳細介紹。旋轉矩陣R和位移向量t實際上可以描述如何將某個點的座標在光標籤坐標系和設備相機坐標系之間轉換。例如,通過旋轉矩陣R和位移向量t,可以將某個點在光標籤坐標系中的座標轉換為在設備相機坐標系中的座標,並可以進一步轉換為圖像中的像點的位置。如此,對於具有多個特徵點(虛擬物件的輪廓上的多個點)的虛擬物件,可以在該虛擬物件的空間位置資訊中包括該多個特徵點在光標籤坐標系中的座標(也即,相對於光標籤的位置資訊),基於多個特徵點在光標籤坐標系中的座標,可以確定這些特徵點在設備相機坐標系中的座標,從而可以確定這些特徵點在設備上的各自成像位置。虛擬物件的多個特徵點的各自成像位置一旦確定,就可以相應地確定出該虛擬物件整體的成像的位置、大小、或姿態等。
在一個實施例中,待疊加的虛擬物件可以具有預設的成像大小。在一個實施例中,在疊加資訊包括虛擬物件的疊加姿態資訊的情況下,可以進一步確定所疊加的虛擬物件的姿態。在一個實施例中,可以根據上文所計算的設備(更準確地說,該設備的相機)相對於光標籤的位姿資訊(R,t)來確定待疊加的虛擬物件在設備上的成像的位置、大小或姿態等。在一種情況下,如果確定待疊加的虛擬物件當前不在第二設備的視野中(例如,虛擬物件的成像位置在顯示幕之外),則不顯示虛擬物件。
在一個實施例中,在第一設備或第二設備掃描光標籤後,可以例如使用設備內置的各種感測器(例如,加速度感測器、磁力感測器、方向感測器、重力感測器、陀螺儀、攝像頭等)通過本領域已知的方法(例如,慣性導航、視覺里程計、SLAM、VSLAM、SFM等)來測量或跟蹤其位置變化和/或姿態變化,從而確定設備的即時位置和/或姿態。
在上述實施例中,光標籤實際上被用作了錨點,基於該錨點,實現了虛擬物件在通過第二設備觀察到的現實場景中的精確疊加。設備可以使用各種可行的方式來呈現現實場景。例如,設備可以通過攝像頭採集現實世界的資訊並使用上述資訊在顯示幕上再現出現實場景,虛擬物件的圖像可以被疊加在該顯示幕上。設備(例如智慧眼鏡)也可以不通過顯示幕來再現現實場景,而是可以簡單地通過棱鏡、透鏡、反射鏡、透明物體(例如玻璃)等來再現現實場景,虛擬物件的圖像可以被光學地疊加到該現實場景中。上述顯示幕、棱鏡、透鏡、反射鏡、透明物體等可以統稱為設備的顯示媒介,虛擬物件可以被呈現在該顯示媒介上。例如,在一種光學透視式增強現實設備中,使用者通過特定的透鏡觀察到現實場景,同時該透鏡可以將虛擬物件的成像反射到用戶的眼中。在一個實施例中,設備的使用者可以直接觀察到現實場景或其部分,該現實場景或其部分在被使用者的眼睛觀察到之前不需要經過任何媒介進行再現,並且虛擬物件可以被光學地疊加到該現實場景中。因此,現實場景或其中的部分在被使用者的眼睛觀察到之前並不一定需要通過設備來呈現或再現。
在疊加了虛擬物件之後,設備可能會發生平移和/或旋轉,在這種情況下,可以使用本領域已知的方法(例如,使用設備內置的加速度感測器、陀螺儀、視覺里程計等)來跟蹤其位置變化以及姿態變化,從而對虛擬物件的顯示進行調整。然而,對位置和姿態變化的跟蹤可能存在誤差,因此,在一個實施例中,設備可以重新(例如,當光標籤離開設備視野後重新進入設備視野時,或者在光標籤保持在設備視野中的情況下每隔一定時間)掃描光標籤以確定其位置資訊和姿態資訊,並重新確定虛擬物件的成像位置和/或成像大小,從而校正所述虛擬物件在現實場景中的疊加。
在一個實施例中,在疊加了虛擬物件之後,設備或其使用者可以對該虛擬物件執行操作,以改變虛擬物件的屬性。例如,設備或其使用者可以移動虛擬物件的位置、改變虛擬物件的姿態、改變虛擬物件的大小或顏色、在虛擬物件上添加標注、等等。在一個實施例中,在設備或其使用者改變了虛擬物件的屬性之後,可以把虛擬物件的修改後的屬性資訊上傳到伺服器。伺服器可以基於修改後的屬性資訊來更新其存儲的虛擬物件的相關資訊。在一個實施例中,設備或其使用者可以對疊加的虛擬物件執行刪除操作,並通知伺服器。仍以上文提到的咖啡購買應用為例,當攜帶有第二設備的咖啡廳店員完成向用戶的咖啡遞送後,可以刪除與該使用者相關聯的虛擬數位序列“123”。
在一些實施例中,來自第一設備的資訊中可以不包括第一設備的位置資訊,而伺服器可以通過其他方式來獲得第一設備的位置資訊。在一個實施例中,伺服器可以通過分析來自第一設備的資訊來獲得第一設備的位置資訊。例如,來自第一設備的資訊可以包括第一設備拍攝的包含光標籤的圖像,伺服器可以通過分析該圖像來獲得第一設備相對於光標籤的位置資訊。在一個實施例中,伺服器可以使用來自第一設備的資訊通過查詢來獲得第一設備的位置資訊。例如,來自第一設備的資訊可以是二維碼標識資訊或者例如桌號的標識資訊,基於該標識資訊,伺服器可以通過查詢來獲得第一設備的位置資訊。任何能夠用於獲得設備位置的資訊(例如,設備拍攝的包含光標籤的圖像、設備掃描的二維碼標識資訊、設備發送的桌號等)都可以被稱為“與設備的位置有關的資訊”。
在一個實施例中,在第二設備的顯示媒介上可以同時呈現多個虛擬物件。在一個實施例中,伺服器可以確定需要在第二設備的顯示媒介上呈現的一個或多個虛擬物件。例如,如果咖啡廳的第一店員要為第一用戶外送咖啡,則伺服器可以將與第一使用者關聯的虛擬物件的相關資訊發送給第一店員的設備;另外,如果咖啡廳的第二店員要同時為第二用戶和第三用戶外送咖啡,則伺服器可以將與第二使用者關聯的虛擬物件的相關資訊以及與第三使用者關聯的虛擬物件的相關資訊發送給第二店員的設備。
在一些情況下,在使用者使用第一設備向伺服器發送了其位置資訊之後,可能改變其位置。例如,購買了咖啡的用戶在發出購買請求時一併發送了其位置資訊,在此之後,使用者可能會在附近走動。為了使得伺服器能夠及時知悉使用者或其第一設備的最新位置,可以將第一設備的新的位置資訊發送給伺服器。第一設備可以通過上文提到的各種方式(例如,通過採集包括光標籤的圖像並分析該圖像)來確定其最新位置資訊,也可以通過第一設備內置的感測器(例如加速度感測器、陀螺儀等)來跟蹤第一設備的位置變化。可以定期地將第一設備的新的位置資訊發送給伺服器,也可以在第一設備的新位置與上次發送給伺服器的位置之間的差大於某個預設閾值時啟動新位置資訊的發送。如此,伺服器可以及時知悉第一設備的新的位置資訊,並可以相應地更新虛擬物件的空間位置資訊,並將虛擬物件的新的空間位置資訊通知給第二設備。第二設備可以相應地使用虛擬物件的新的空間位置資訊來在其顯示媒介上呈現或更新虛擬物件。
圖7示出了根據一個實施例的基於光標籤的交互方法,該方法可以實現對第一設備的位置的跟蹤,其步驟701-704與圖6的步驟601-604類似,在此不再贅述。圖7的交互方法進一步包括如下步驟:
步驟705:伺服器接收來自第一設備的新的資訊。
該新的資訊可以是任何能夠用於獲得第一設備的位置的資訊,例如,第一設備內置的感測器通過跟蹤而獲得的第一設備的位移資訊。
步驟706:伺服器基於所述新的資訊更新第一設備的位置資訊。
步驟707:伺服器基於更新後的第一設備的位置資訊更新虛擬物件的空間位置資訊。
步驟708:伺服器將更新後的虛擬物件的空間位置資訊發送給第二設備,以便第二設備能夠基於其位置資訊和姿態資訊以及所述更新後的所述虛擬物件的空間位置資訊在其顯示媒介上呈現或更新虛擬物件。
在一個實施例中,也可以使得能夠在第一設備的顯示媒介上呈現與第二設備相關聯的虛擬物件。以上文描述的咖啡購買服務為例,在配送過程中,店員可以使用其設備(例如,手機、智慧眼鏡等)掃描光標籤,以確定店員的設備的位置資訊和姿態資訊。在此之後,店員的設備可以將其位置資訊發送給伺服器。伺服器可以為店員的設備設置一個虛擬物件,該虛擬物件的空間位置資訊基於店員設備的位置資訊而確定。伺服器可以將該虛擬物件的相關資訊發送給購買了咖啡的使用者的設備,並且可以通知使用者其咖啡正在配送。使用者然後可以使用其設備(例如,手機、智慧眼鏡等)掃描光標籤,以確定使用者設備的位置資訊和姿態資訊。從而,使用者設備可以基於其位置資訊和姿態資訊以及與店員設備關聯的虛擬物件的相關資訊,在使用者設備的顯示媒介上的合適位置處呈現虛擬物件(例如,數位序列“123”),這有助於在用戶和店員之間的更方便的交互。由於配送咖啡的店員通常在移動之中,因此,可以跟蹤店員設備的位置,並定期地或即時地將店員設備的位置發送到伺服器,以更新與店員設備關聯的虛擬物件的空間位置資訊,該更新後的空間位置資訊隨後被發送到使用者的設備。
圖8示出了根據一個實施例的基於光標籤的交互方法,該方法可以進一步在第一設備的顯示媒介上呈現與第二設備相關聯的虛擬物件,其步驟801-804與圖6的步驟601-604類似,在此不再贅述。圖8的交互方法進一步包括如下步驟:
步驟805:伺服器接收來自第二設備的資訊,並確定第二設備的位置資訊。
步驟806:伺服器設置與第二設備相關聯的具有空間位置資訊的另一虛擬物件,其中,該另一虛擬物件的空間位置資訊基於第二設備的位置資訊而確定。
步驟807:伺服器將與該另一虛擬物件有關的資訊發送給第一設備,該資訊中包括該另一虛擬物件的空間位置資訊,以使得第一設備能夠基於其位置資訊和姿態資訊以及與該另一虛擬物件有關的資訊,在其顯示媒介上呈現該另一虛擬物件。
在一個實施例中,在圖8所示的方法中,還可以進一步地以與圖7的方法類似的方式對第二設備的位置資訊以及該另一虛擬物件的空間位置資訊進行更新,以使得在第一設備的顯示媒介上呈現的該另一虛擬物件能夠跟蹤第二設備的位置。
在許多場景下,可能存在不止一個光標籤,而是存在如圖2所示的光標籤網路,其中,伺服器可以知悉各個光標籤的位姿資訊或者它們之間的相對位姿關係。在這些場景下,第一設備和第二設備掃描的光標籤可能不是同一個光標籤,第一設備也可能在不同的時間掃描多個不同的光標籤來提供或更新其位置資訊(在提供或更新位置資訊可以發送相關的光標籤的標識資訊),第二設備也可能在不同的時間掃描多個不同的光標籤來確定其位置資訊和姿態資訊。例如,如圖9所示,在一個餐廳中可能佈置了包括第一光標籤和第二光標籤的多個光標籤,就餐的使用者可以使用第一設備掃描第一光標籤來確定其位置,餐廳店員在配送菜品時可以使用其第二設備來掃描第二光標籤以確定第二設備的位置資訊和姿態資訊。
在一些場景下,第一設備和第二設備初始時可能距離比較遠,在這種情況下,第二設備的使用者可以先使用現有的一些導航方式(例如GPS導航)行進到第一設備附近,然後,再通過使用第二設備掃描周圍的光標籤來在第二設備的顯示媒介上呈現與第一設備關聯的虛擬物件。
圖10示出了一種應用場景,其能夠在不同的個人用戶之間實現基於位置的服務方案。該場景中具有一個光標籤以及位於該光標籤附近的第一用戶和第二用戶,其中,第一使用者攜帶了第一設備,第二使用者攜帶了第二設備,第一設備和第二設備例如可以是手機、智慧眼鏡等。圖10所示的光標籤例如可以佈置在一個廣場上。在廣場上的第一使用者發現自己臨時需要使用某個物品(例如,剪刀、膠帶、藥品等),但其並未隨身攜帶。為此,第一使用者可以使用第一設備掃描並識別光標籤,以向與光標籤關聯的伺服器發送請求,例如,“求借或求購物品A”。在第一使用者使用第一設備掃描光標籤時,可以拍攝光標籤的圖像,並根據該圖像進行相對定位,以確定出第一用戶(更準確地說,第一使用者的第一設備)的位置資訊,該位置資訊可以與上述請求一起被發送到伺服器。伺服器在接收到來自第一設備的請求後,可以為第一設備設置一個虛擬物件,該虛擬物件例如可以是一個指示箭頭。伺服器還可以根據所接收到的第一設備的位置資訊來確定虛擬物件的空間位置資訊,例如可以將虛擬物件的位置設定為第一設備所在的位置或者在第一設備所在位置上方1米處。在第一設備向伺服器發送請求後,第二使用者可以使用第二設備掃描並識別光標籤,並從與光標籤關聯的伺服器接收第一設備所發送的請求。如果第二用戶能夠提供物品A以滿足第一用戶的請求,則其可以使用第二設備向伺服器發送回應。伺服器在接收到來自第二設備的響應後,可以將之前為第一設備設置的虛擬物件的相關資訊(包括其空間位置資訊)發送給第二設備。第二設備在掃描光標籤時,可以確定其位置資訊和姿態資訊。如此,可以基於第二設備的位置和姿態,在第二設備的顯示媒介上的合適位置處呈現虛擬物件(例如,指示箭頭)。例如,可以在第二設備的顯示幕上展示的現實場景中的合適位置處疊加指示箭頭,該指示箭頭所在的位置或其下方1米左右的位置即為第一使用者或第一設備所在的位置。圖11示出了在第二設備的顯示媒介上疊加虛擬物件(例如,指示箭頭)的示意圖。如此,可以使用光標籤作為錨點來實現虛擬物件的準確疊加,從而幫助第二用戶迅速地找到第一用戶所在的位置,以實現兩個用戶之間的交互。可以理解,第一使用者和第二使用者所掃描的光標籤可以是不同的光標籤。
圖12示出了根據一個實施例的基於光標籤的交互方法,該方法包括如下步驟:
步驟1201:伺服器接收來自第一設備的資訊,該資訊中包括第一設備的位置資訊。
來自第一設備的資訊例如可以是第一設備的使用者向伺服器發出的求助請求,但也可以是其他任何資訊。第一設備向伺服器發送的資訊可以包括光標籤的標識資訊。
步驟1202:伺服器設置與第一設備相關聯的具有空間位置資訊的虛擬物件,其中,該虛擬物件的空間位置資訊基於第一設備的位置資訊而確定。
在接收到來自第一設備的資訊(例如求助請求)後,伺服器可以設置與第一設備相關聯的虛擬物件。虛擬物件的空間位置資訊根據第一設備的位置資訊來確定。
步驟1203:伺服器將來自第一設備的資訊或其一部分提供給第二設備。
當第二設備掃描並識別光標籤時,其可以通過所識別的光標籤的標識資訊與伺服器進行交互。在交互過程中,伺服器可以將其接收到的來自第一設備的資訊或其一部分發送給第二設備。例如,伺服器可以將“第一用戶求借或求購物品A”發送給第二設備。可以在第二設備上以各種形式向第二使用者呈現來自第一設備的資訊,例如,以短消息的形式、以應用程式中的彈出通知的形式、等等。在一個實施例中,可以在第二設備的顯示媒介上呈現的光標籤圖像上或者其附近呈現出一個虛擬的留言板,並在其上顯示來自第一設備的資訊。
步驟1204:伺服器接收第二設備對來自第一設備的資訊或其一部分的回應。
如果第二使用者對來自第一設備的資訊感興趣(例如,第二用戶能夠滿足第一使用者通過第一設備發送的求助請求),其可以通過第二設備向伺服器發送回應。
步驟1205:伺服器將與虛擬物件有關的資訊發送給第二設備,該資訊中包括虛擬物件的空間位置資訊。
在接收到來自第二設備的回應後,伺服器可以將與虛擬物件有關的資訊發送給第二設備。與虛擬物件有關的資訊中包括虛擬物件的空間位置資訊,其可以是相對於光標籤的位置資訊。在一個實施例中,與虛擬物件有關的資訊還可以包括虛擬物件的疊加姿態資訊。
步驟1206:第二設備基於其通過光標籤確定的位置資訊和姿態資訊以及與虛擬物件有關的資訊,在第二設備的顯示媒介上呈現虛擬物件。
在一些實施例中,圖12所示的方法可以進一步以與圖7所示的方法類似的方式對第一設備的位置進行跟蹤。在一些實施例中,圖12所示的方法可以進一步以與圖8所示的方法類似的方式在第一設備的顯示媒介上呈現與第二設備相關聯的虛擬物件。
在一些實施例中,來自第一設備的資訊可以具有關聯的有效時間範圍,以限定該資訊在哪個時間範圍內有效。例如,第一使用者在通過第一設備發送求助請求時,可以設定該請求在一定時間(例如10分鐘)內有效。在超出有效時間範圍之後,伺服器可以不再向其他設備發送來自第一設備的資訊或其部分。
在一些實施例中,來自第一設備的資訊可以具有關聯的有效地理範圍,以限定該資訊在哪個地理範圍內有效。例如,在一個應用場景中,第一使用者通過第一設備向伺服器發送一個事件通知(例如,第一用戶正在地點A進行現場表演),以便能邀請其他用戶來觀看。第一用戶可以設置與該事件通知關聯的地理範圍。例如,第一用戶可以設置該事件通知能被其周圍500米範圍內的其他用戶接收到,第一用戶也可以設置該事件通知能被與其周圍500米範圍內的光標籤交互的其他用戶接收到,等等。如此,伺服器可以基於所確定的其他用戶與第一用戶之間的相對距離,或者所確定的不同光標籤與第一用戶之間的相對距離,來確定將該事件通知發送給哪些使用者的設備。
在一個實施例中,伺服器可以獲得設備的屬性資訊,並基於設備的屬性資訊設置與設備相關聯的所述虛擬物件,設備的屬性資訊可以包括與設備有關的資訊、與設備的使用者有關的資訊、和/或設備的使用者自訂的資訊,例如,設備名稱或標識號;設備使用者的姓名、職業、身份、性別、年齡、昵稱、頭像、簽名、設備上某個應用的帳戶資訊,或者使用者使用該設備所執行的操作的資訊,例如登錄網頁、註冊帳戶、購買資訊等等。
在一個實施例中,在虛擬物件具有姿態資訊的情況下,虛擬物件的姿態可以隨著設備相對於虛擬物件的位置和/姿態而調整,例如使得虛擬物件的某個方位(例如虛擬對象的正面方向)始終朝向設備。
本文中提到的設備可以是使用者攜帶或控制的設備(例如,手機、平板電腦、智慧眼鏡、智慧頭盔、智慧手錶、等等),但是可以理解,該設備也可以是能夠自主移動的機器,例如,無人機、無人駕駛汽車、機器人等。設備上可以安裝有圖像採集器件(例如攝像頭)和/或顯示媒介(例如顯示幕)。
在本發明的一個實施例中,可以以電腦程式的形式來實現本發明。電腦程式可以存儲於各種電腦可讀取記錄媒體(例如,硬碟、光碟、快閃記憶體等)中,當該電腦程式被處理器執行時,能夠用於實現本發明的方法。
在本發明的另一個實施例中,可以以電子設備的形式來實現本發明。該電子設備包括處理器和記憶體,在記憶體中存儲有電腦程式,當該電腦程式被處理器執行時,能夠用於實現本發明的方法。
本文中針對“各個實施例”、“一些實施例”、“一個實施例”、或“實施例”等的參考指代的是結合所述實施例所描述的特定特徵、結構、或性質包括在至少一個實施例中。因此,短語“在各個實施例中”、“在一些實施例中”、“在一個實施例中”、或“在實施例中”等在整個本文中各處的出現並非必須指代相同的實施例。此外,特定特徵、結構、或性質可以在一個或多個實施例中以任何合適方式組合。因此,結合一個實施例中所示出或描述的特定特徵、結構或性質可以整體地或部分地與一個或多個其他實施例的特徵、結構、或性質無限制地組合,只要該組合不是不符合邏輯的或不能工作。本文中出現的類似於“根據A”、“基於A”、“通過A”或“使用A”的表述意指非排他性的,也即,“根據A”可以涵蓋“僅僅根據A”,也可以涵蓋“根據A和B”,除非特別聲明或者根據上下文明確可知其含義為“僅僅根據A”。在本申請中為了清楚說明,以一定的順序描述了一些示意性的操作步驟,但本領域技術人員可以理解,這些操作步驟中的每一個並非是必不可少的,其中的一些步驟可以被省略或者被其他步驟替代。這些操作步驟也並非必須以所示的方式依次執行,相反,這些操作步驟中的一些可以根據實際需要以不同的循序執行,或者並存執行,只要新的執行方式不是不符合邏輯的或不能工作。
由此描述了本發明的至少一個實施例的幾個方面,可以理解,對本領域技術人員來說容易地進行各種改變、修改和改進。這種改變、修改和改進意於在本發明的精神和範圍內。雖然本發明已經通過優選實施例進行了描述,然而本發明並非局限於這裡所描述的實施例,在不脫離本發明範圍的情況下還包括所作出的各種改變以及變化。
100:光標籤
101:第一光源
102:第二光源
103:第三光源
601-604:步驟
701-708:步驟
801-807:步驟
1201-1206:步驟
圖1,為本發明一種示例性的光標籤。
圖2,為本發明一種示例性的光標籤網路。
圖3,為本發明在一個餐廳門的上方佈置的光標籤。
圖4,為本發明店員給用戶配送咖啡的示意圖。
圖5,為本發明在店員設備的顯示媒介上疊加虛擬物件的示意圖。
圖6,為本發明一個實施例的基於光標籤的交互方法。
圖7,為本發明一個實施例的基於光標籤的交互方法。
圖8,為本發明一個實施例的基於光標籤的交互方法。
圖9,為本發明包括兩個光標籤的交互系統。
圖10,為本發明一種應用場景,其能夠在不同的個人用戶之間實現基於位置的服務方案。
圖11,為本發明在第二設備的顯示媒介上疊加虛擬物件的示意圖。
圖12,為本發明一個實施例的基於光標籤的交互方法。
601-604:步驟
Claims (13)
- 一種基於光通信裝置的交互方法,包括:伺服器接收來自第一設備的與所述第一設備的位置有關的資訊;所述伺服器通過與所述第一設備的位置有關的資訊獲得所述第一設備的位置資訊;所述伺服器設置與所述第一設備相關聯的具有空間位置資訊的虛擬物件,其中,所述虛擬物件的空間位置資訊基於所述第一設備的位置資訊而確定;所述伺服器將與所述虛擬物件有關的資訊發送給第二設備,該資訊中包括所述虛擬物件的空間位置資訊,其中,與所述虛擬物件有關的資訊能夠被所述第二設備使用以基於該第二設備通過光通信裝置確定的位置資訊和姿態資訊在該第二設備顯示媒介上呈現所述虛擬物件;所述伺服器接收來自第一設備的新的與所述第一設備的位置有關的資訊;所述伺服器基於所述新的與所述第一設備的位置有關的資訊更新所述第一設備的位置資訊;所述伺服器基於更新後的所述第一設備的位置資訊更新所述虛擬物件的空間位置資訊;以及所述伺服器將更新後的所述虛擬物件的空間位置資訊發送給所述第二設備,以便所述第二設備能夠基於該第二設備位置資訊和姿態資訊以及所述更新後的所述虛擬物件的空間 位置資訊在該第二設備顯示媒介上呈現或更新所述虛擬物件。
- 如申請專利範圍第1項所述的方法,其中,通過與所述第一設備的位置有關的資訊獲得所述第一設備的位置資訊包括以下至少之一:從與所述第一設備的位置有關的資訊中提取所述第一設備的位置資訊;通過分析與所述第一設備的位置有關的資訊來獲得所述第一設備的位置資訊;或者使用與所述第一設備的位置有關的資訊通過查詢來獲得所述第一設備的位置資訊。
- 如申請專利範圍第1項所述的方法,其中,與所述第一設備的位置有關的資訊包括所述第一設備相對於光通信裝置的位置資訊,其中,所述第一設備通過使用圖像採集器件採集包括所述光通信裝置的圖像並分析該圖像來確定該第一設備相對於所述光通信裝置的位置資訊。
- 根如申請專利範圍第1項所述的方法,其中,所述第二設備通過使用圖像採集器件採集包括光通信裝置的圖像並分析該圖像來確定該第二設備位置資訊和/或姿態資訊。
- 如申請專利範圍第1項所述的方法,還包括:在所述伺服器將與虛擬物件有關的資訊發送給第二設備之前,所述伺服器確定需要在所述第二設備的顯示媒介上呈現的與一個或多個第一設備關聯的一個或多個虛擬物件。
- 如申請專利範圍第1項所述的方法,還包括:所述伺服器接收來自所述第二設備的與所述第二設備的位置有關的資訊,並確定所述第二設備的位置資訊;所述伺服器設置與所述第二設備相關聯的具有空間位置資訊的另一虛擬物件,其中,該另一虛擬物件的空間位置資訊基於所述第二設備的位置資訊而確定;以及所述伺服器將與該另一虛擬物件有關的資訊發送給所述第一設備,該資訊中包括該另一虛擬物件的空間位置資訊,其中,與該另一虛擬物件有關的資訊能夠被所述第一設備使用以基於該第一設備位置資訊和姿態資訊在該第一設備顯示媒介上呈現該另一虛擬物件。
- 如申請專利範圍第1項所述的方法,其中,在所述伺服器將與所述虛擬物件有關的資訊發送給所述第二設備之前,還包括:所述伺服器將來自所述第一設備的資訊或該資訊一部分提供給所述第二設備;以及所述伺服器接收所述第二設備對來自所述第一設備的資訊或該資訊一部分的回應。
- 如申請專利範圍第1項所述的方法,還包括:所述伺服器獲得所述第一設備的屬性資訊;以及所述伺服器基於所述第一設備的屬性資訊設置與所述第一設備相關聯的所述虛擬對象,其中,所述第一設備的屬性資訊包括與所述第一設備有關的資訊、與所述第一設備的使用者有關的資訊、和/或所述第一設備的使用者自訂的資訊。
- 如申請專利範圍第1項所述的方法,其中,所述第一設備的位置資訊是相對於光通信裝置的位置資訊、在場所坐標系中的位置資訊、或者在世界坐標系中的位置資訊;和/或,所述第二設備的位置資訊和姿態資訊是相對於光通信裝置的位置資訊和姿態資訊、在場所坐標系中的位置資訊和姿態資訊、或者在世界坐標系中的位置資訊和姿態資訊。
- 如申請專利範圍第9項所述的方法,其中,與所述第一設備的位置資訊相關聯的光通信裝置和與所述第二設備的位置資訊相關聯的光通信裝置是相同的光通信裝置或者不同的光通信裝置,其中,所述不同的光通信裝置具有確定的相對位姿關係。
- 如申請專利範圍第1項所述的方法,其中,所述虛擬物件的姿態能夠根據所述第二設備相對於所述虛擬物件的位置和/或姿態變化而調整。
- 一種電腦可讀取記錄媒體,其中存儲有電腦程式,在所述電腦程式被處理器執行時,能夠用於實現如申請專利範圍第1-11項中任一項所述的方法。
- 一種電子設備,包括處理器和記憶體,所述記憶體中存儲有電腦程式,在所述電腦程式被處理器執行時,能夠用於實現如申請專利範圍第1-11項中任一項所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW109120406A TWI747333B (zh) | 2020-06-17 | 2020-06-17 | 基於光通信裝置的交互方法、電子設備以及電腦可讀取記錄媒體 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW109120406A TWI747333B (zh) | 2020-06-17 | 2020-06-17 | 基於光通信裝置的交互方法、電子設備以及電腦可讀取記錄媒體 |
Publications (2)
Publication Number | Publication Date |
---|---|
TWI747333B true TWI747333B (zh) | 2021-11-21 |
TW202201224A TW202201224A (zh) | 2022-01-01 |
Family
ID=79907762
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW109120406A TWI747333B (zh) | 2020-06-17 | 2020-06-17 | 基於光通信裝置的交互方法、電子設備以及電腦可讀取記錄媒體 |
Country Status (1)
Country | Link |
---|---|
TW (1) | TWI747333B (zh) |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050033835A1 (en) * | 2003-07-07 | 2005-02-10 | Fuji Photo Film Co., Ltd. | Device control system, device control method for use in the device control system, and program for implementing the device control method |
TW200846692A (en) * | 2007-04-03 | 2008-12-01 | Human Network Labs Inc | Method and apparatus for acquiring local position and overlaying information |
TW201236722A (en) * | 2010-12-22 | 2012-09-16 | Intel Corp | Techniques for mobile augmented reality applications |
TW201244459A (en) * | 2011-03-02 | 2012-11-01 | Microsoft Corp | Immersive display experience |
WO2020038155A1 (zh) * | 2018-08-22 | 2020-02-27 | 科沃斯机器人股份有限公司 | 自主移动设备、控制方法及存储介质 |
WO2020042978A1 (zh) * | 2018-08-28 | 2020-03-05 | 维克多哈苏有限公司 | 控制装置、摄像装置、控制方法以及程序 |
TW202015430A (zh) * | 2018-07-31 | 2020-04-16 | 日商尼康股份有限公司 | 顯示控制系統、顯示控制方法、及顯示控制程序 |
TWM594767U (zh) * | 2019-12-11 | 2020-05-01 | 狂點軟體開發股份有限公司 | 虛擬人物直播系統 |
WO2020100569A1 (ja) * | 2018-11-14 | 2020-05-22 | ソニー株式会社 | 制御装置、制御方法及びセンサ制御システム |
CN111256701A (zh) * | 2020-04-26 | 2020-06-09 | 北京外号信息技术有限公司 | 一种设备定位方法和系统 |
TW202022594A (zh) * | 2018-10-02 | 2020-06-16 | 美商高通公司 | 當表達電腦調解之實境系統時表示閉塞 |
-
2020
- 2020-06-17 TW TW109120406A patent/TWI747333B/zh active
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050033835A1 (en) * | 2003-07-07 | 2005-02-10 | Fuji Photo Film Co., Ltd. | Device control system, device control method for use in the device control system, and program for implementing the device control method |
TW200846692A (en) * | 2007-04-03 | 2008-12-01 | Human Network Labs Inc | Method and apparatus for acquiring local position and overlaying information |
TW201236722A (en) * | 2010-12-22 | 2012-09-16 | Intel Corp | Techniques for mobile augmented reality applications |
TW201244459A (en) * | 2011-03-02 | 2012-11-01 | Microsoft Corp | Immersive display experience |
TW202015430A (zh) * | 2018-07-31 | 2020-04-16 | 日商尼康股份有限公司 | 顯示控制系統、顯示控制方法、及顯示控制程序 |
WO2020038155A1 (zh) * | 2018-08-22 | 2020-02-27 | 科沃斯机器人股份有限公司 | 自主移动设备、控制方法及存储介质 |
WO2020042978A1 (zh) * | 2018-08-28 | 2020-03-05 | 维克多哈苏有限公司 | 控制装置、摄像装置、控制方法以及程序 |
TW202022594A (zh) * | 2018-10-02 | 2020-06-16 | 美商高通公司 | 當表達電腦調解之實境系統時表示閉塞 |
WO2020100569A1 (ja) * | 2018-11-14 | 2020-05-22 | ソニー株式会社 | 制御装置、制御方法及びセンサ制御システム |
TWM594767U (zh) * | 2019-12-11 | 2020-05-01 | 狂點軟體開發股份有限公司 | 虛擬人物直播系統 |
CN111256701A (zh) * | 2020-04-26 | 2020-06-09 | 北京外号信息技术有限公司 | 一种设备定位方法和系统 |
Non-Patent Citations (1)
Title |
---|
"建構一以RFID定位之擴增實境系統 Developing an Augmented Reality System based on RFID Positioning", 劉彥辰, 國立政治大學責訊管理研究所碩士論文, July, 2000. * |
Also Published As
Publication number | Publication date |
---|---|
TW202201224A (zh) | 2022-01-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11614803B2 (en) | Individually interactive multi-view display system for non-stationary viewing locations and methods therefor | |
US9536350B2 (en) | Touch and social cues as inputs into a computer | |
US9074899B2 (en) | Object guiding method, mobile viewing system and augmented reality system | |
US20150170256A1 (en) | Systems and Methods for Presenting Information Associated With a Three-Dimensional Location on a Two-Dimensional Display | |
JP7439844B2 (ja) | 端末装置、情報処理装置、情報出力方法、情報処理方法、接客支援方法及びプログラム | |
US20130174213A1 (en) | Implicit sharing and privacy control through physical behaviors using sensor-rich devices | |
US9875546B1 (en) | Computer vision techniques for generating and comparing three-dimensional point clouds | |
WO2015195413A1 (en) | Systems and methods for presenting information associated with a three-dimensional location on a two-dimensional display | |
JP7347480B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
TWI764366B (zh) | 基於光通信裝置的互動方法和系統 | |
TWI750822B (zh) | 用於為目標設置可呈現的虛擬對象的方法和系統 | |
TWI747333B (zh) | 基於光通信裝置的交互方法、電子設備以及電腦可讀取記錄媒體 | |
CN112055034B (zh) | 基于光通信装置的交互方法和系统 | |
WO2020244578A1 (zh) | 基于光通信装置的交互方法和电子设备 | |
WO2021057886A1 (zh) | 基于光通信装置的导航方法、系统、设备及介质 | |
CN112055033B (zh) | 基于光通信装置的交互方法和系统 | |
TWI734464B (zh) | 基於光通信裝置的資訊顯示方法、電子設備、以及電腦可讀取記錄媒體 | |
TWI759764B (zh) | 基於光通信裝置疊加虛擬物件的方法、電子設備以及電腦可讀取記錄媒體 | |
WO2020244576A1 (zh) | 基于光通信装置叠加虚拟对象的方法和相应的电子设备 | |
TW202223749A (zh) | 用於獲得場景中的設備或其使用者的標識資訊的方法和系統 |