TW202119228A - 基於光通信裝置的互動方法和系統 - Google Patents

Abstract

一種基於光通信裝置的互動方法，包括：基於第一設備採集的光通信裝置的圖像獲得該第一設備的位置資訊和姿態資訊，其中，該第一設備具有攝影裝置；基於第二設備採集的光通信裝置的圖像獲得該第二設備的位置資訊，其中，該第二設備具有攝影裝置；伺服器根據該第一設備的位置資訊和姿態資訊以及該第二設備的位置資訊，確定該第二設備相對於該第一設備的位置關係；伺服器根據該第二設備相對於該第一設備的位置關係以及預定的規則執行操作。

Description

基於光通信裝置的互動方法和系統

本發明涉及資訊互動領域，尤其涉及一種基於光通信裝置的互動方法和系統。

本部分的陳述僅僅是為了提供與本發明相關的背景資訊，以說明理解本發明，這些背景資訊並不一定構成現有技術。

隨著科技的發展，基於位置的服務(Location-based Service)獲得了越來越廣泛的應用。基於位置的服務例如是導航、尋找附近商家、尋找附近的人、等等。現有的基於位置的服務通常是通過電信運營商的無線電通訊網路(如GSM網、CDMA網)或衛星定位系統(如GPS)來獲取使用者設備的位置資訊(地理座標)，並基於該位置資訊為使用者提供相應服務。然而，現有的基於位置的服務並不能獲得使用者設備的精確位置資訊，也無法獲得使用者設備的姿態資訊，這對使用者間基於設備的交流互動造成限制。

本發明的一個方面涉及一種基於光通信裝置的互動方法，包括：獲得第一設備的位置資訊和姿態資訊，其中，該第一設備上具有攝影裝置，以及其中，通過分析包括光通信裝置的圖像來確定該第一設備的位置資訊和姿態資訊；獲得第二設備的位置資訊，其中，該第二設備上具有攝影裝置，以及其中，通過分析包括光通信裝置的圖像來確定該第二設備的位置資訊；根據該第一設備的位置資訊和姿態資訊以及該第二設備的位置資訊，確定 該第二設備相對於該第一設備的位置關係；基於該第二設備相對於該第一設備的位置關係以及預定的規則執行操作。

在本發明之一實施例中，上述之第二設備相對於該第一設備的位置關係包括該第二設備在該第一設備的攝影裝置的視野內的位置。

在本發明之一實施例中，上述之獲得第一設備的位置資訊和姿態資訊包括：從該第一設備接收該位置資訊和姿態資訊，其中，該第一設備通過採集並分析包括光通信裝置的圖像來確定該位置資訊和姿態資訊；該獲得第二設備的位置資訊包括：從該第二設備接收該位置資訊，其中，該第二設備通過採集並分析包括光通信裝置的圖像來確定該位置資訊。

在本發明之一實施例中，上述之獲得第一設備的位置資訊和姿態資訊包括：伺服器通過分析該第一設備採集的包括光通信裝置的圖像以確定該第一設備的位置資訊和姿態資訊；該獲得第二設備的位置資訊包括：伺服器通過分析該第二設備採集的包括光通信裝置的圖像以確定該第二設備的位置資訊。

在本發明之一實施例中，上述與該第一設備的位置資訊和姿態資訊相關聯的光通信裝置和與該第二設備的位置資訊相關聯的光通信裝置是相同的光通信裝置，或者不同的光通信裝置，該不同的光通信裝置具有確定的相對位置關係。

在本發明之一實施例中，上述之第一設備的位置資訊和姿態資訊是該第一設備相對於光通信裝置的位置資訊和姿態資訊、在場景坐標系中的位置資訊和姿態資訊、或者在世界坐標系中的位置資訊和姿態資訊；該第二設備的位置資訊是該第二設備相對於光通信裝置的位置資訊、在場景坐標系中的位置資訊、或者在世界坐標系中的位置資訊。

在本發明之一實施例中，上述之第一設備在場景坐標系中的位置資訊和姿態資訊是基於該第一設備相對於該光通信裝置的位置資訊和姿態資訊以及該光通信裝置本身在場景坐標 系中的位置資訊和姿態資訊所獲得的，該第一設備在世界坐標系中的位置資訊和姿態資訊是基於該第一設備相對於該光通信裝置的位置資訊和姿態資訊以及該光通信裝置本身在世界坐標系中的位置資訊和姿態資訊所獲得的；該第二設備在場景坐標系中的位置資訊是基於該第二設備相對於該光通信裝置的位置資訊以及該光通信裝置本身在場景坐標系中的位置資訊所獲得的，該第二設備在世界坐標系中的位置資訊是基於該第二設備相對於該光通信裝置的位置資訊以及該光通信裝置本身在世界坐標系中的位置資訊所獲得的。

在本發明之一實施例中，上述之預定的規則包括：當該第二設備位於該第一設備的攝影裝置視野的預定區域時執行操作。

在本發明之一實施例中，上述之基於該第二設備相對於該第一設備的位置關係以及預定的規則執行操作包括：基於該第二設備相對於該第一設備的位置關係、該第一設備或第二設備的輸入、以及預定的規則執行操作。

在本發明之一實施例中，上述之基於該第二設備相對於該第一設備的位置關係以及預定的規則執行操作包括：基於該第二設備相對於該第一設備的位置關係、該第一設備或第二設備的屬性資訊、以及預定的規則執行操作。

在本發明之一實施例中，上述之操作包括獲取、發送、顯示、修改、增加或刪除與該第一設備或者該第二設備相關聯的屬性資訊。

在本發明之一實施例中，還包括：獲得該第一設備的更新的位置資訊和姿態資訊；和/或獲得該第二設備的更新的位置資訊。

在本發明之一實施例中，還包括：獲得第二設備的姿態資訊，其中，通過分析包括光通信裝置的圖像來確定該第二設備的姿態資訊；根據該第一設備的位置資訊以及該第二設備 的位置資訊和姿態資訊，確定該第一設備相對於該第二設備的位置關係；基於該第一設備相對於該第二設備的位置關係以及預定的規則執行操作。

在本發明之一實施例中，還包括：設置與該第二設備相關聯的具有空間位置資訊的虛擬物件，該虛擬物件的空間位置資訊基於該第二設備的位置資訊確定；將與該虛擬物件有關的資訊發送給該第一設備，使其能夠被該第一設備使用以基於其通過光通信裝置確定的位置資訊和姿態資訊在其顯示裝置上呈現該虛擬物件；以及其中，該執行操作包括對該虛擬物件執行操作。

在本發明之一實施例中，上述之虛擬物件還具有姿態資訊。

在本發明之一實施例中，還包括：設置與該第一設備相關聯的具有空間位置資訊的另一虛擬物件，該另一虛擬物件的空間位置資訊基於該第一設備的位置資訊確定；將與該另一虛擬物件有關的資訊發送給該第二設備，使其能夠被該第二設備使用以基於其通過光通信裝置確定的位置資訊和姿態資訊在其顯示裝置上呈現該另一虛擬物件。

本發明的另一個方面涉及一種基於設備位置資訊和姿態資訊的互動系統，包括：一個或多個光通信裝置；至少兩個設備，該設備上具有攝影裝置，該攝影裝置能夠採集包括該光通信裝置的圖像；以及能夠與該設備通信的伺服器，其配置用於實現任一上述的方法。

本發明的再一個方面涉及一種儲存裝置，其中儲存有電腦程式，在該電腦程式被處理器執行時，能夠用於實現上述的方法。

本發明的再一個方面涉及一種電子設備，包括處理器和記憶體，該記憶體中儲存有電腦程式，在該電腦程式被處理器執行時，能夠用於實現上述的方法。

100:光標籤

101:第一光源

102:第二光源

103:第三光源

S310~S340:步驟流程

S410~S440:步驟流程

圖1是一種示例性的光標籤。

圖2是一種示例性的光標籤網路。

圖3是根據本發明之一種基於光通信裝置的互動系統實施例的互動方法。

圖4是根據本發明之一種基於光通信裝置的互動系統實施例的互動方法。

為了使本發明的目的、技術方案及優點更加清楚明白，以下結合附圖通過具體實施例對本發明進一步詳細說明。應當理解，此處所描述的具體實施例僅用以解釋本發明，並不用於限定本發明。

光通信裝置也稱為光標籤，這兩個術語在本文中可以互換使用。光標籤能夠通過不同的發光方式來傳遞資訊，其具有識別距離遠、可見光條件要求寬鬆的優勢，並且光標籤所傳遞的資訊可以隨時間變化，從而可以提供大的資訊容量和靈活的配置能力。

為讓本發明之上述特徵和優點能更明顯易懂，下文特舉實施例，並配合所附圖式，作詳細說明如下。

光標籤中通常可以包括控制器和至少一個光源，該控制器可以通過不同的驅動模式來驅動光源，以向外傳遞不同的資訊。圖1示出了一種示例性的光標籤100，其包括三個光源(分別是第一光源101、第二光源102、第三光源103)。光標籤100還包括控制器(在圖1中未示出)，其用於根據要傳遞的資訊為每個光源選擇相應的驅動模式。例如，在不同的驅動模式下，控制器可以使用不同的驅動信號來控制光源的發光方式，從而使得當使用具有成像功能的設備拍攝光標籤100時，其中的光源的圖像可以呈現出不同的外觀(例如，不同的顏色、圖案、亮度、 等等)。通過分析光標籤100中的光源的成像，可以解析出各個光源此刻的驅動模式，從而解析出光標籤100此刻傳遞的資訊。可以理解，圖1僅僅用作示例，光標籤可以具有與圖1所示的示例不同的形狀，並且可以具有與圖1所示的示例不同數量和/或不同形狀的光源。

為了基於光標籤向使用者提供相應的服務，每個光標籤可以被分配一個標識資訊(ID)。通常，可由光標籤中的控制器驅動光源以向外傳遞該標識資訊，圖像採集設備可以對光標籤進行圖像採集來獲得包含光標籤的一幅或多幅圖像，並通過分析圖像中的光標籤(或光標籤中的各個光源)的成像以識別出光標籤傳遞的標識資訊，之後，可以獲取與標識資訊相關聯的其他資訊，例如，與該標識資訊對應的光標籤的位置資訊。

可以將與每個光標籤相關的資訊儲存於伺服器中。在現實中，還可以將大量的光標籤構建成一個光標籤網路。圖2示出了一種示例性的光標籤網路，該光標籤網路包括多個光標籤和至少一個伺服器。可以在伺服器上保存每個光標籤的標識資訊(ID)或其他資訊，例如與該光標籤相關的服務資訊、與該光標籤相關的描述資訊或屬性資訊，如光標籤的位置資訊、型號資訊、物理尺寸資訊、物理形狀資訊、姿態或朝向資訊等。光標籤也可以具有統一的或預設的物理尺寸資訊和物理形狀資訊等。設備可以使用識別出的光標籤的標識資訊來從伺服器查詢獲得與該光標籤有關的其他資訊。光標籤的位置資訊可以是指該光標籤在物理世界中的實際位置，其可以通過地理座標資訊來指示。伺服器可以是在計算裝置上運行的軟體程式、一台計算裝置或者由多台計算裝置構成的集群。光標籤可以是離線的，也即，光標籤不需要與伺服器進行通信。當然，可以理解，能夠與伺服器進行通信的線上光標籤也是可行的。

本文提到的設備例如可以是使用者隨身攜帶或控制的設備(例如，帶有攝影裝置的手機、平板電腦、智慧眼鏡、 AR眼鏡、智慧頭盔、智慧手錶等等)，也可以是能夠自主移動的機器(例如，帶有攝影裝置的無人機、無人駕駛汽車、機器人等等)。設備可以通過其上的攝影裝置對光標籤進行圖像採集來獲得包含光標籤的圖像。設備可以具有顯示裝置或與顯示裝置相關聯。

以大型會議為例進行說明，攜帶有設備(例如帶有攝影裝置的手機)的參會人員可以掃描並識別佈置在其周圍的光標籤，並通過所識別的光標籤標識資訊來訪問相應的服務。在使用者使用其設備掃描光標籤時，可以拍攝光標籤的圖像並基於該圖像通過相對定位來確定使用者設備相對於光標籤的位置資訊和姿態資訊，並將該位置資訊和姿態資訊發送到伺服器。伺服器通過上述方法獲得參會人員設備的位置資訊和姿態資訊(簡稱位姿資訊)後，可以根據設備的位置資訊和姿態資訊確定設備的攝影裝置的視野範圍。若預定的規則規定：當第二設備位於第一設備的攝影裝置視野的預定範圍內時，伺服器將第二設備的有關資訊發送給第一設備，則當參會人員乙(即設備乙)的位置處於參會人員甲(即設備甲)的攝影裝置視野的預定範圍內時，伺服器可以根據預定的規則，將參會人員乙的有關資訊(例如可以是姓名、職業、工作單位等)發送給參會人員甲。

再以虛擬射擊遊戲為例進行說明，攜帶有設備(例如可以是帶有攝影裝置的模擬射擊器械)的遊戲玩家可以拍攝光標籤的圖像，並通過分析該圖像來確定該遊戲玩家設備相對於光標籤的位置資訊和姿態資訊。該位置資訊和姿態資訊可以被發送給伺服器。伺服器可以基於該遊戲玩家設備的位置資訊和姿態資訊確定其攝影裝置的視野範圍。若預定的規則規定：當第二設備位於第一設備的攝影裝置視野的預定範圍(例如，攝影裝置視野的中心)內時，表明第一設備當前瞄準了第二設備，則當遊戲玩家乙(即設備乙)的位置處於遊戲玩家甲(即設備甲)的攝影裝置視野的預定範圍內時，伺服器根據預定的規則可以判斷遊 戲玩家甲當前瞄準了遊戲玩家乙，此時如果遊戲玩家甲執行射擊操作，伺服器可以記錄遊戲玩家甲命中遊戲玩家乙，並可以相應地改變與遊戲玩家乙有關的屬性資訊(例如可以是生命力值等)。

圖3示出了根據一個實施例的基於光通信裝置的互動方法，該方法包括以下步驟：

步驟310：伺服器獲得第一設備的位置資訊和姿態資訊，其中，第一設備上具有攝影裝置，以及其中，通過分析包括光通信裝置的圖像來確定第一設備的位置資訊和姿態資訊。

第一設備可以通過掃描光標籤來識別光標籤傳遞的資訊，並基於該資訊訪問伺服器，向伺服器傳送資訊。

伺服器可以採用各種方式來獲得第一設備的位姿資訊。在一個實施例中，伺服器可以從來自第一設備的資訊中提取該設備的位姿資訊，此時，來自第一設備的資訊中可以包含該第一設備的位姿資訊。在一個實施例中，設備可以通過採集包括光標籤的圖像並分析該圖像來確定其相對於光標籤的位姿資訊。例如，設備可以通過圖像中的光標籤成像大小以及可選的其他資訊(例如，光標籤的實際物理尺寸資訊、設備的攝影裝置的焦距)來確定光標籤與設備的相對距離(成像越大，距離越近；成像越小，距離越遠)。設備可以使用光標籤的標識資訊從伺服器獲得光標籤的實際物理尺寸資訊，或者光標籤可以具有統一的物理尺寸並在設備上儲存該物理尺寸。設備可以使用光標籤的標識資訊從伺服器獲得光標籤的物理形狀資訊，或者光標籤可以具有統一的物理形狀並在設備上儲存該物理形狀。在一個實施例中，設備也可以通過其上安裝的深度攝影裝置或雙目攝影裝置等來直接獲得光標籤與設備的相對距離。設備也可以採用現有的任何其他定位方法來確定其相對於光標籤的位置資訊。設備也可以確定其姿態資訊，該姿態資訊可以用於確定設備拍攝的現實場景的範圍或邊界。通常情況下，設備的姿態資訊實際上是設備的圖像採 集器件(例如攝影裝置)的姿態資訊。在一個實施例中，設備可以掃描光標籤，並且可以根據光標籤的成像來確定其相對於光標籤的姿態資訊，當光標籤的成像位置或成像區域位於設備成像視野的中心時，可以認為設備當前正對著光標籤。在確定設備的姿態時可以進一步考慮光標籤的成像的方向。隨著設備的姿態發生改變，光標籤在設備上的成像位置和/或成像方向會發生相應的改變，因此，可以根據光標籤在設備上的成像來獲得設備相對於光標籤的姿態資訊。在一個實施例中，設備也可以根據光標籤建立一個坐標系，該坐標系可以被稱為光標籤坐標系。可以將光標籤上的一些點確定為在光標籤坐標系中的一些空間點，並且可以根據光標籤的物理尺寸資訊和/或物理形狀資訊來確定這些空間點在光標籤坐標系中的座標。光標籤上的一些點例如可以是光標籤的外殼的角、光標籤中的光源的端部、光標籤中的一些標識點、等等。根據光標籤的物體結構特徵或幾何結構特徵，可以在設備相機拍攝的圖像中找到與這些空間點分別對應的像點，並確定各個像點在圖像中的位置。根據各個空間點在光標籤坐標系中的座標以及對應的各個像點在圖像中的位置，結合設備相機的內參資訊，可以計算得到拍攝該圖像時設備相機在光標籤坐標系中的位姿資訊(R，t)，其中R為旋轉矩陣，其可以用於表示設備相機在光標籤坐標系中的姿態資訊，t為位移向量，其可以用於表示設備相機在光標籤坐標系中的位置資訊。計算R、t的方法在現有技術中是已知的，例如，可以利用3D-2D的PnP(Perspective-n-Point)方法來計算R、t，為了不模糊本發明，在此不再詳細介紹。旋轉矩陣R和位移向量t實際上可以描述如何將某個點的座標在光標籤坐標系和設備相機坐標系之間轉換。例如，通過旋轉矩陣R和位移向量t，可以將某個點在光標籤坐標系中的座標轉換為在設備相機坐標系中的座標，並可以進一步轉換為圖像中的像點的位置。

在一個實施例中，伺服器也可以通過分析來自第 一設備的資訊來獲得該設備的位姿資訊。來自第一設備的資訊中可以包含有光標籤的圖像資訊。伺服器通過分析該圖像以確定第一設備相對於光標籤的位姿資訊。具體方法同上述設備通過分析光標籤圖像獲得其相對於光標籤的位姿資訊類似，在此不再贅述。

步驟320：伺服器獲得第二設備的位置資訊，其中，第二設備上具有攝影裝置，以及其中，通過分析包括光通信裝置的圖像來確定第二設備的位置資訊。

伺服器可以採用各種方式來獲得第二設備相對於光標籤的位置資訊，具體方式與上文在步驟310中描述的各種方式類似，在此不再贅述。

在一個實施例中，伺服器還可以獲得第二設備的姿態資訊，方法同上文類似。

伺服器從設備接收的位姿資訊或者伺服器通過分析獲得的設備的位姿資訊可以是設備相對於光標籤的位姿資訊，也可以是設備在場景坐標系下的位姿資訊或在世界坐標系下的位姿資訊。設備或者伺服器可以根據不同坐標系之間的變換矩陣來實現目標位元姿在不同坐標系之間的轉換。在一個實施例中，設備或者伺服器可以根據設備相對於光標籤的位姿資訊以及光標籤本身在場景坐標系中的位姿資訊，來確定設備在場景坐標系中的位姿資訊，設備或者伺服器也可以根據設備相對於光標籤的位姿資訊以及光標籤本身在世界坐標系中的位姿資訊，來確定設備在世界坐標系中的位姿資訊。在一個實施例中，設備可以向伺服器發送其相對於光標籤的位姿資訊，之後，伺服器可以根據設備相對於光標籤的位姿資訊以及光標籤本身在場景坐標系或世界坐標系中的位姿資訊，來確定設備在場景坐標系或世界坐標系中的位姿資訊。光標籤本身在場景坐標系或世界坐標系中的位姿資訊可以儲存於伺服器，並且可以由設備使用光標籤的標識資訊從伺服器獲得。

設備的位姿資訊可以是設備在掃描光標籤時的位姿資訊，也可以是設備在掃描光標籤之後使用內置的加速度感測器、陀螺儀、攝影裝置等通過本領域已知的方法(例如，慣性導航、視覺里程計、SLAM、VSLAM、SFM等)測量或跟蹤獲得的新的位姿資訊。伺服器可以持續獲得設備的新的位姿資訊並更新設備的位姿資訊。

在許多場景下，可能存在不止一個光標籤，而是存在如圖2所示的光標籤網路，其中，伺服器可以知悉各個光標籤的位姿資訊或者它們之間的相對位姿關係。在這些場景下，第一設備和第二設備掃描的光標籤可能不是同一個光標籤，第一設備也可能在不同的時間掃描多個不同的光標籤來提供或更新其位置資訊(在提供或更新位置資訊可以發送相關的光標籤的標識資訊)，第二設備也可能在不同的時間掃描多個不同的光標籤來確定其位置資訊和姿態資訊。

步驟330：伺服器根據第一設備的位置資訊和姿態資訊以及第二設備的位置資訊，確定第二設備相對於第一設備的位置關係。

在一個實施例中，伺服器可以基於第一設備的位置資訊和姿態資訊確定一個以第一設備為座標原點的坐標系，並將第二設備的位置資訊轉換為該坐標系下的位置資訊，如此，可以確定第二設備相對於第一設備(也即座標原點)的位置關係。在一個實施例中，伺服器可以根據第一設備的位姿資訊確定第一設備的攝影裝置的視野範圍，並根據第一設備的攝影裝置的視野範圍以及第二設備的位置資訊確定第二設備位於第一設備攝影裝置視野範圍內還是視野範圍外，並且可以確定第二設備在第一設備攝影裝置視野範圍內的具體位置。

步驟340：伺服器基於第二設備相對述第一設備的位置關係以及預定的規則執行操作。

伺服器執行的操作可以包括選中設備、獲取設備 的有關資訊、向設備發送有關的資訊、增加或修改與設備有關的資訊、或者刪除設備的某些資訊等。與設備有關的資訊可以預先儲存在伺服器中，也可以由設備即時發送給伺服器。

在一個實施例中，與設備有關的資訊可以包括設備的屬性資訊。設備的屬性資訊可以是使用設備的使用者的資訊，也可以是使用者自訂的資訊或系統設置的資訊，或者是其他任何資訊。例如，在會議場景中，設備甲的屬性資訊可以是參會人員甲的個人資訊(例如可以包括參會人員甲的姓名、職業、工作單位等)，也可以是參會人員甲自訂的資訊(例如可以是甲主動提供的聯繫方式，如手機號碼，郵箱等)，或是系統根據參會人員甲的身份設置的屬性資訊(例如“演講者”)。在一個實施例中，設備的屬性資訊還可以包括設備屬性的具體資料值。例如，在射擊遊戲場景中，設備甲的屬性資訊可以包括遊戲玩家甲的遊戲角色的身份、等級、技能、生命力值等。

伺服器基於設備之間的相對位置關係以及預定的規則判斷是否應當執行相應的操作以實現用戶之間的互動。預定的規則可以是任何規則，其可以由使用者自行設定，也可以由伺服器預先設定。例如，預定的規則可以規定：當第二設備位於第一設備攝影裝置視野範圍內，就執行相應的操作。此時，例如在會議場景中，當參會人員乙(即設備乙)出現在參會人員甲的設備攝影裝置視野範圍內，伺服器就向甲發送乙的身份、職業、工作單位等有關資訊。預定的規則也可以規定：當第二設備位於第一設備的攝影裝置視野的中心區域時，伺服器執行相應的操作。此時，只有當參會人員乙(即設備乙)位於參會人員甲的設備攝影裝置視野的中心區域時，伺服器才向乙發送甲的身份、職業、工作單位等有關資訊。

在一個實施例中，伺服器可以基於設備間的相對位置關係、設備的輸入、以及預定的規則執行相應的操作。例如，預定的規則可以規定：若第二設備位於第一設備的攝影裝置 視野的非中心區域時，當第一設備選中顯示裝置中第二設備的成像時，伺服器執行相應的操作，則在會議場景中，當參會人員乙(即設備乙)出現在參會人員甲的設備攝影裝置視野範圍內，但位於非中心區域時，當參會人員甲點擊了乙在其設備中的成像時，伺服器向甲發送乙的身份、職業、工作單位等有關資訊。在一個實施例中，可以在第一設備的顯示裝置上呈現相應的效果以提示第一設備的使用者選中或命中了第二設備。例如，可以在顯示裝置的第二設備成像上呈現選中或命中的圖示。在一個實施例中，為了幫助用戶選中或瞄準，也可以在第一設備的顯示裝置上呈現相應的輔助圖示，例如指示框或瞄準器圖示等。

在一個實施例中，伺服器可以根據設備間的相對位置關係、設備的屬性資訊、以及預定的規則執行相應的操作。例如，預定的規則可以規定：當第二設備位於第一設備的攝影裝置視野範圍內時，且當第一用戶和/或第二用戶為特定身份時，伺服器才執行相應的操作。

在一些場景下，伺服器可以持續獲得設備不斷更新的位姿資訊，並根據設備更新的位姿資訊確定是否執行相應的操作。在一個實施例中，當第一設備掃描光標籤時，第二設備所在的位置可能並不位於第一設備的視野(例如第一設備的攝影裝置的視野)中，在這種情況下，可以嘗試平移和/或旋轉第一設備，並通過第一設備內置的感測器(例如加速度感測器、陀螺儀、視覺里程計等)跟蹤第一設備的位姿變化，從而確定第一設備的新的視野。當第二設備所在的位置進入第一設備的視野時，可以執行相應的操作。使用設備內置感測器跟蹤設備位姿變化的技術是定位與導航技術領域的公知技術，在此不再贅述。

在一個實施例中，可以基於第二設備採集的光標籤的圖像獲得第二設備的位置資訊和姿態資訊，伺服器可以根據第二設備的位置資訊和姿態資訊以及第一設備的位置資訊確定第一設備相對於第二設備的位置關係，並基於第一設備相對於第二 設備的位置關係以及預定的規則執行相應的操作。具體方式與上文步驟310-340中描述的各種方式類似，在此不再贅述。

在一個實施例中，伺服器也可以設置與設備相關聯的虛擬物件，並可以將光標籤作為錨點，來實現虛擬物件到現實場景的疊加，例如使用該虛擬物件來準確地標識現實場景中的使用者或設備所在的位置。虛擬物件例如可以是圖示、圖片、文字、數位、表情符號、虛擬的三維物體、三維場景模型、一段動畫、一段視頻、等等。使用者或設備可以通過對其他使用者的虛擬物件進行操作以實現互動交流。

還以上述多人射擊遊戲為例進行說明，攜帶有設備(例如可以是帶有攝影裝置的模擬射擊器械、AR眼鏡等)的遊戲玩家甲可以使用其設備掃描並識別佈置在其周圍的某個光標籤以確定該設備的位姿資訊。伺服器獲得甲的設備的位姿資訊後可以根據甲的設備的位置資訊為甲設置一個具有空間位置資訊的虛擬物件。該虛擬物件例如可以是用於表示甲在遊戲中選擇的角色的相關資訊的圖示或數值，例如，具有經驗值資料或生命力資料的員警圖示、具有經驗值資料或生命力資料的匪徒圖示。根據該虛擬物件的空間位置資訊以及其他玩家的設備的位姿資訊，可以將該虛擬物件準確地呈現在其他玩家的設備的顯示裝置上。遊戲開始後，伺服器根據預定的規則可以判斷遊戲玩家甲當前瞄準了遊戲玩家乙，此時如果遊戲玩家甲執行射擊操作，伺服器可以記錄遊戲玩家甲命中遊戲玩家乙，並可以相應地改變與遊戲玩家乙有關的屬性資訊(例如可以是生命力值等)以及與遊戲玩家甲有關的屬性資訊(例如可以是經驗值等)。遊戲玩家甲或乙的屬性資訊的改變可以通過虛擬物件表現出來，例如，使得虛擬物件呈現的經驗值資料增加或者使得虛擬物件呈現的生命力資料減少。如此，可以將各個玩家及代表其角色的虛擬物件準確對應，從而提升玩家沉浸式感官體驗。優選地，遊戲玩家在遊戲過程中可以使用AR眼鏡而不是手機，以體驗更真實的遊戲環境。

圖4示出了根據一個實施例的基於光通信裝置的互動方法，其中步驟410和420與上述步驟310和320類似，此外，該方法還包括如下步驟：

步驟430：伺服器為第二設備設置具有空間位置資訊的虛擬物件，該虛擬物件的空間位置資訊基於第二設備的位置資訊確定。

在一些場景下，例如在接收到來自第二設備的資訊(例如請求加入遊戲的資訊)後，伺服器可以設置與第二設備相關聯的虛擬物件。該虛擬物件例如可以是第二設備在遊戲中選擇的角色所對應的名稱、性別、人物形象的虛擬圖示等等。在一個實施例中，伺服器還可以根據與第二設備有關的資訊設置虛擬物件，例如可以根據設備的屬性資訊、使用該設備的使用者的資訊、使用者使用設備所執行的某個操作有關的資訊(例如加入遊戲的時間)、使用者自訂的資訊、或系統設置的資訊設置虛擬物件。

虛擬物件的空間位置資訊可以根據第二設備的位置資訊來確定，該空間位置資訊可以是相對於光標籤的位置資訊，也可以是在場景坐標系中或世界坐標系中的位置資訊。伺服器可以將虛擬物件的空間位置簡單地確定為第二設備的位置，也可以將虛擬物件的空間位置確定為其他位置，例如，位於第二設備的位置附近的其他位置。

在一個實施例中，伺服器還可以根據第二設備的姿態資訊設置與虛擬物件的姿態資訊。虛擬物件的姿態資訊可以是第二設備相對於光標籤的姿態資訊，也可以是其在場景坐標系或世界坐標系中的姿態資訊。以上述射擊遊戲為例，可以根據遊戲玩家在遊戲場景下的位姿資訊設置與遊戲玩家相關聯的虛擬物件的位姿資訊。例如，當玩家甲背對玩家乙時，甲的虛擬物件(例如遊戲角色的人物形象)也是背對著玩家乙。

在虛擬物件具有姿態資訊的情況下，與第二設備 關聯的虛擬物件的姿態資訊可以根據第一設備的姿態資訊確定，即與第二設備相關聯的虛擬物件的姿態可以隨著第一設備的姿態而調整。在一個實施例中，可以根據第一設備相對於第二設備的姿態資訊確定虛擬物件的姿態，使得虛擬物件的某個方位(例如虛擬對象的正面方向)始終朝向第一設備。還以上述射擊遊戲為例，乙的虛擬物件(例如角色名稱)的正面始終朝向甲的設備。在一個實施例中，可以基於設備和虛擬物件的位置在空間中確定一個從虛擬物件到設備的方向，並基於該方向來確定虛擬對象的姿態。通過上述方法，同一個虛擬物件對於處於不同位置的設備實際上可以具有各自的姿態。

步驟440：伺服器將與虛擬物件有關的資訊發送給第一設備，使其能夠被第一設備使用以基於其通過光通信裝置確定的位置資訊和姿態資訊在其顯示裝置上呈現該虛擬物件。

伺服器可以通過多種方式向第一設備發送虛擬物件的相關資訊。在一個實施例中，伺服器可以例如通過無線鏈路直接將與虛擬物件有關的資訊發送給第一設備。在一個實施例中，光標籤識別設備可以通過掃描場景中佈置的光標籤來識別光標籤傳遞的資訊(例如標識資訊)，並使用該資訊訪問伺服器(例如，通過無線信號進行訪問)以從伺服器獲得虛擬物件的相關資訊。在一個實施例中，伺服器可以使用光標籤以光通信方式將虛擬物件的相關資訊發送到光標籤識別設備。虛擬物件的相關資訊能夠被光標籤識別設備使用以基於其位置資訊和/或姿態資訊在其顯示裝置上呈現該虛擬物件。

步驟450：伺服器根據第一設備的位姿資訊和第二設備的位置資訊確定第二設備相對於第一設備的位置關係。

步驟460：伺服器根據第二設備相對於第一設備的位置關係以及預定的規則對該虛擬物件執行操作。

如前所述，伺服器可以基於該第二設備相對於該第一設備的位置關係以及預定的規則執行操作，伺服器執行的操 作可以通過虛擬物件呈現在顯示裝置上。例如，伺服器執行選中設備、獲取設備的有關資訊、向設備發送有關的資訊、增加或修改與設備有關的資訊、或者刪除設備的某些資訊等操作，可以通過選中與該設備相關聯的虛擬物件、增加或修改與該虛擬物件的相關資訊、或者刪除該虛擬物件的某些資訊等方式呈現在顯示裝置上。

在一些場景中，也可以設置與第一設備相關聯的另一虛擬物件，該另一虛擬物件的空間位置資訊可以基於第一設備的位置資訊確定。可以將該另一虛擬物件發送給第二設備並可以基於第二設備相對於光標籤的位置資訊和姿態資訊在其顯示裝置上呈現該虛擬物件。如此，使用者之間可以基於相互的虛擬物件進行互動。

在一些情況下，在疊加了虛擬物件之後，與設備有關的資訊發生了改變，伺服器可以基於來自設備的新的資訊持續更新與設備相關聯的虛擬物件。在一個實施例中，在伺服器設置了與設備關聯的虛擬物件後，設備的位置資訊和/或姿態資訊發生了改變。為了使伺服器能夠及時知悉該設備的最新位置和姿態，可以通過再次掃描光標籤或其他方式將設備的新的位置資訊發送給伺服器。設備可以通過上文提到的各種方式(例如，通過採集包括光標籤的圖像並分析該圖像)來確定其相對於光標籤的最新位姿資訊，也可以通過設備內置的感測器(例如加速度感測器、陀螺儀、攝影裝置等)來跟蹤該設備的位置變化。可以定期地將該設備的新的位姿資訊發送給伺服器，也可以在設備的新位元姿與上次發送給伺服器的位姿之間的差大於某個預設閾值時啟動新位姿資訊的發送。如此，伺服器可以及時知悉該設備的新的位姿資訊，並可以相應地更新虛擬物件的空間位姿資訊。例如，在射擊遊戲中，當玩家甲和玩家乙之間的距離逐漸變大時，呈現在乙設備的顯示裝置上的甲的虛擬物件和呈現在甲設備的顯示裝置上的乙的虛擬物件相應地變小，當玩家甲和玩家乙由面對面轉 向背對背時，呈現在甲設備是顯示裝置上的乙的虛擬物件和呈現在乙設備的顯示裝置上的甲的虛擬物件也隨著各自設備的姿態資訊變化而做相應的調整。在一個實施例中，在伺服器為設備設置虛擬物件後，與設備有關的屬性資訊發生改變，此時，伺服器可以根據新的設備的屬性資訊持續更新與該設備相關聯的虛擬物件。例如，射擊遊戲中玩家甲被多次命中，則玩家甲的虛擬物件的生命力值可以顯示逐漸減少。

在一個實施例中，設備或其使用者可以改變虛擬物件的有關資訊。例如，設備或其使用者可以設置新的虛擬物件、移動虛擬物件的位置、改變虛擬物件的姿態、改變虛擬物件的大小或顏色、在虛擬物件上添加標注、或者刪除其虛擬物件等等。伺服器可以基於修改後內容來更新該虛擬物件併發送給相關設備。

在一個實施例中，用戶可以通過編輯與其他使用者相關聯的虛擬物件來進行相互交流。例如，使用者可以把編輯後的虛擬物件的有關資訊上傳到伺服器，由伺服器發送給與該虛擬物件相關聯的設備，或者顯示在與自己相關聯的虛擬物件或其他虛擬物件上並被其他使用者可見。在一個實施例中，設備或其使用者可以對疊加的虛擬物件執行刪除操作，並通知伺服器。在一個實施例中，用戶可以進行隱私設置，限制其編輯操作的可見範圍。

在本發明的一個實施例中，可以以電腦程式的形式來實現本發明。電腦程式可以儲存於各種儲存裝置(例如，硬碟、光碟、快取記憶體等)中，當該電腦程式被處理器執行時，能夠用於實現本發明的方法。

在本發明的另一個實施例中，可以以電子設備的形式來實現本發明。該電子設備包括處理器和記憶體，在記憶體中儲存有電腦程式，當該電腦程式被處理器執行時，能夠用於實現本發明的方法。

本文中針對“各個實施例”、“一些實施例”、“一個實施例”、或“實施例”等的參考指代的是結合該實施例所描述的特定特徵、結構、或性質包括在至少一個實施例中。因此，短語“在各個實施例中”、“在一些實施例中”、“在一個實施例中”、或“在實施例中”等在整個本文中各處的出現並非必須指代相同的實施例。此外，特定特徵、結構、或性質可以在一個或多個實施例中以任何合適方式組合。因此，結合一個實施例中所示出或描述的特定特徵、結構或性質可以整體地或部分地與一個或多個其他實施例的特徵、結構、或性質無限制地組合，只要該組合不是不符合邏輯的或不能工作。本文中出現的類似於“根據A”、“基於A”、“通過A”或“使用A”的表述意指非排他性的，也即，“根據A”可以涵蓋“僅僅根據A”，也可以涵蓋“根據A和B”，除非特別聲明或者根據上下文明確可知其含義為“僅僅根據A”。在本申請中為了清楚說明，以一定的順序描述了一些示意性的操作步驟，但本領域技術人員可以理解，這些操作步驟中的每一個並非是必不可少的，其中的一些步驟可以被省略或者被其他步驟替代。這些操作步驟也並非必須以所示的方式依次執行，相反，這些操作步驟中的一些可以根據實際需要以不同的循序執行，或者並存執行，只要新的執行方式不是不符合邏輯的或不能工作。

由此描述了本發明的至少一個實施例的幾個方面，可以理解，對本領域技術人員來說容易地進行各種改變、修改和改進，這種改變、修改和改進都在本發明的精神和範圍內。雖然本發明已經通過優選實施例進行了描述，然而本發明並非局限於這裡所描述的實施例，在不脫離本發明範圍的情況下還包括所作出的各種改變以及變化。

S310~S340:步驟流程

Claims (16)

1. 一種基於光通信裝置的互動方法，包括：

   獲得第一設備的位置資訊和姿態資訊，其中，該第一設備上具有攝影裝置，以及其中，通過分析該第一設備的攝影裝置採集的包括光通信裝置的圖像來確定該第一設備的位置資訊和姿態資訊；

   獲得第二設備的位置資訊，其中，該第二設備上具有攝影裝置，以及其中，通過分析該第二設備的攝影裝置採集的包括光通信裝置的圖像來確定該第二設備的位置資訊；

   根據該第一設備的位置資訊和姿態資訊以及該第二設備的位置資訊，確定該第二設備相對於該第一設備的位置關係；以及

   基於該第二設備相對於該第一設備的位置關係以及預定的規則執行操作。
2. 如申請專利範圍第1項所述的一種基於光通信裝置的互動方法，其中，該第二設備相對於該第一設備的位置關係包括該第二設備在該第一設備的攝影裝置的視野內的位置。
3. 如申請專利範圍第1項所述的一種基於光通信裝置的互動方法，其中該獲得第一設備的位置資訊和姿態資訊包括：從該第一設備接收該位置資訊和姿態資訊，其中，該第一設備通過採集並分析包括光通信裝置的圖像來確定該位置資訊和姿態資訊；

   該獲得第二設備的位置資訊包括：從該第二設備接收該位置資訊，其中，該第二設備通過採集並分析包括光通信裝置的圖像來確定該位置資訊。
4. 如申請專利範圍第1項所述的一種基於光通信裝置的互動方法，其中該獲得第一設備的位置資訊和姿態資訊包括：伺服器通過分析該第一設備採集的包括光通信裝置的圖像以確定該第一設備的位置資訊和姿態資訊；該獲得第二設備的位置資訊包括：伺服器通過分析該第二設備採集的包括光通信裝置的圖像以確定該第二設備的位置資訊。
5. 如申請專利範圍第1項所述的一種基於光通信裝置的互動方法，其中與該第一設備的位置資訊和姿態資訊相關聯的光通信裝置和與該第二設備的位置資訊相關聯的光通信裝置是相同的光通信裝置，或者不同的光通信裝置，該不同的光通信裝置具有確定的相對位置關係。
6. 如申請專利範圍第1項所述的一種基於光通信裝置的互動方法，其中該預定的規則包括：當該第二設備位於該第一設備的攝影裝置視野的預定區域時執行操作。
7. 如申請專利範圍第1項所述的一種基於光通信裝置的互動方法，其中該基於該第二設備相對於該第一設備的位置關係以及預定的規則執行操作包括：基於該第二設備相對於該第一設備的位置關係、該第一設備或第二設備的輸入、以及該預定的規則執行操作。
8. 如申請專利範圍第1項所述的一種基於光通信裝置的互動方法，其中該基於該第二設備相對於該第一設備的位置關係以及預定的規則執行操作包括：基於該第二設備相對於該第一設備的位置關係、該第一設備或第二設備的屬性資訊、以及該預定的規則執行操作。
9. 如申請專利範圍第1項所述的一種基於光通信裝置的互動方法，其中該操作包括獲取、發送、顯示、修改、增加或刪除與該第一設備或者該第二設備相關聯的屬性資訊。
10. 如申請專利範圍第1項所述的一種基於光通信裝置的互動方法，還包括：

    獲得該第一設備的更新的位置資訊和姿態資訊；和/或

    獲得該第二設備的更新的位置資訊。
11. 如申請專利範圍第1項所述的一種基於光通信裝置的互動方法，還包括：

    獲得該第二設備的姿態資訊，其中，通過分析包括光通信裝置 的圖像來確定該第二設備的姿態資訊；

    根據該第一設備的位置資訊以及該第二設備的位置資訊和姿態資訊，確定該第一設備相對於該第二設備的位置關係；

    基於該第一設備相對於該第二設備的位置關係以及該預定的規則執行操作。
12. 如申請專利範圍第1至11項所述的一種基於光通信裝置的互動方法，還包括：

    設置與該第二設備相關聯的具有空間位置資訊的虛擬物件，該虛擬物件的空間位置資訊基於該第二設備的位置資訊確定；

    將與該虛擬物件有關的資訊發送給該第一設備，使其能夠被該第一設備使用以基於其通過光通信裝置確定的位置資訊和姿態資訊在其顯示裝置上呈現該虛擬物件；

    以及其中，該執行操作包括對該虛擬物件執行操作。
13. 如申請專利範圍第12項所述的一種基於光通信裝置的互動方法，還包括：

    設置與該第一設備相關聯的具有空間位置資訊的另一虛擬物件，該另一虛擬物件的空間位置資訊基於該第一設備的位置資訊確定；

    將與該另一虛擬物件有關的資訊發送給該第二設備，使其能夠被該第二設備使用以基於其通過光通信裝置確定的位置資訊和姿態資訊在其顯示裝置上呈現該另一虛擬物件。
14. 一種基於光通信裝置的互動系統，其中包括：

    一個或多個光通信裝置；

    至少兩個設備，該設備上具有攝影裝置，該攝影裝置能夠採集包括該光通信裝置的圖像；以及

    能夠與該設備通信的伺服器，其配置用於申請專利範圍1-13中任一項所述的方法。
15. 一種儲存裝置，其中儲存有電腦程式，在該電腦程式被處理器執行時，能夠用於申請專利範圍1-13中任一項所述的方法。
16. 一種電子設備，包括處理器和記憶體，該記憶體中儲存有電腦 程式，在該電腦程式被處理器執行時，能夠用於申請專利範圍1-13中任一項所述的方法。

Images