TW202205090A - 實現目標物體定位的方法、裝置及顯示器件 - Google Patents

實現目標物體定位的方法、裝置及顯示器件 Download PDF

Info

Publication number
TW202205090A
TW202205090A TW110125728A TW110125728A TW202205090A TW 202205090 A TW202205090 A TW 202205090A TW 110125728 A TW110125728 A TW 110125728A TW 110125728 A TW110125728 A TW 110125728A TW 202205090 A TW202205090 A TW 202205090A
Authority
TW
Taiwan
Prior art keywords
target object
image
realizing
transmission path
displacement sensor
Prior art date
Application number
TW110125728A
Other languages
English (en)
Other versions
TWI816153B (zh
Inventor
刁鴻浩
玲溪 黃
Original Assignee
大陸商北京芯海視界三維科技有限公司
新加坡商視覺技術創投私人有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 大陸商北京芯海視界三維科技有限公司, 新加坡商視覺技術創投私人有限公司 filed Critical 大陸商北京芯海視界三維科技有限公司
Publication of TW202205090A publication Critical patent/TW202205090A/zh
Application granted granted Critical
Publication of TWI816153B publication Critical patent/TWI816153B/zh

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/22—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of characters or indicia using display control signals derived from coded signals representing the characters or indicia, e.g. with a character-code memory
    • G09G5/32—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of characters or indicia using display control signals derived from coded signals representing the characters or indicia, e.g. with a character-code memory with means for controlling the display position
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/18—Timing circuits for raster scan displays
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0464—Positioning

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Graphics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)
  • Radar Systems Or Details Thereof (AREA)
  • Measurement Of Velocity Or Position Using Acoustic Or Ultrasonic Waves (AREA)

Abstract

本申請涉及光學技術領域，公開了一種實現目標物體定位的方法，包括：獲得目標物體的目標物體位置；在不經由應用處理器的情況下，向顯示控制器提供目標物體位置。本申請提供的實現目標物體定位的方法，能夠儘量避免應用處理器因處理目標物體位置而導致的大量資源佔用。本申請還公開了一種實現目標物體定位的裝置及顯示器件、電腦可讀存儲介質、電腦程式產品。

Description

實現目標物體定位的方法、裝置及顯示器件
本申請主張在2020年07月15日提交中國知識產權局、申請號為202010681260.5、發明名稱為“實現目標物體定位的方法、裝置及顯示器件”的中國專利申請的優先權，其全部內容通過引用結合在本申請中。
本申請涉及光學技術領域，例如涉及一種實現目標物體定位的方法、裝置及顯示器件。
目前，對目標物體進行定位、顯示處理時，通常需要將目標物體位置發送給應用處理器進行處理。
在實現本公開實施例的過程中，發現相關技術中至少存在如下問題：
處理目標物體位置會導致應用處理器的資源被大量佔用。
為了對披露的實施例的一些方面有基本的理解，下面給出了簡單的概括。該概括不是泛泛評述，也不是要確定關鍵／重要組成元素或描繪這些實施例的保護範圍，而是作為後面的詳細說明的序言。
本公開實施例提供了一種實現目標物體定位的方法、裝置及顯示器件、電腦可讀存儲介質、電腦程式產品，以解決處理目標物體位置會導致應用處理器的資源被大量佔用的技術問題。
本公開實施例提供的實現目標物體定位的方法，包括：
獲得目標物體的目標物體位置；
在不經由應用處理器（AP）的情況下，向顯示控制器提供目標物體位置。
在一些實施例中，在不經由AP的情況下，向顯示控制器提供目標物體位置，可以包括：
通過不經由AP的目標物體位置傳輸通路，向顯示控制器提供目標物體位置。
在一些實施例中，還可以確定目標物體位置傳輸通路。
在一些實施例中，確定目標物體位置傳輸通路，可以包括：
將預先設置的不經由AP的傳輸通路作為目標物體位置傳輸通路；或
在至少兩條傳輸通路中選擇不經由AP的傳輸通路，將選擇的不經由AP的傳輸通路作為目標物體位置傳輸通路；或
將經由AP的傳輸通路排除出目標物體位置傳輸通路。
在一些實施例中，顯示控制器可以是時序控制器（T-con）。
在一些實施例中，提供目標物體位置，可以包括：
針對顯示控制器，主動或被動地發送目標物體位置。
在一些實施例中，主動地發送目標物體位置，可以包括：實時或週期性地發送目標物體位置。可選地，被動地發送目標物體位置，可以包括：基於接收到的請求發送目標物體位置。
在一些實施例中，發送目標物體位置，可以包括：
直接或間接地向顯示控制器發送目標物體位置。
在一些實施例中，獲得目標物體的目標物體位置，可以包括：
獲得目標物體的目標物體圖像，基於目標物體圖像獲得目標物體的目標物體位置。
在一些實施例中，獲得目標物體的目標物體圖像，可以包括：
通過位移傳感器獲得目標物體圖像；
其中，目標物體包括用戶的眼部，目標物體圖像包含眼部的眼部空間信息。
在一些實施例中，眼部空間信息可以包括眼部平面位置信息；
獲得目標物體的目標物體位置，可以包括：
根據目標物體圖像中包含的眼部平面位置信息得到眼部深度信息，從而獲得眼部的空間坐標。
在一些實施例中，還可以移除目標物體圖像。
在一些實施例中，移除目標物體圖像，可以包括：
將位移傳感器中的目標物體圖像轉移至位移傳感器以外的實體，以使得位移傳感器中不存在目標物體圖像；
或
將位移傳感器中的目標物體圖像刪除。
在一些實施例中，將目標物體圖像轉移至實體，可以包括：
將目標物體圖像轉移至能夠刪除目標物體圖像的實體。
在一些實施例中，移除目標物體圖像，可以包括：
基於目標物體圖像獲得目標物體的目標物體位置之後，立即移除目標物體圖像；或
提供目標物體位置之後，立即移除目標物體圖像；或
基於目標物體圖像獲得目標物體的目標物體位置、或提供目標物體位置之後，在滿足移除條件時移除目標物體圖像。
在一些實施例中，目標物體圖像可以包括2D圖像或3D圖像。
本公開實施例提供的實現目標物體定位的裝置，包括處理器和存儲有程式指令的記憶體，處理器被配置為在執行程式指令時，執行上述的實現目標物體定位的方法。
本公開實施例提供的顯示器件，包括：位移傳感器以及上述的實現目標物體定位的裝置；
其中，位移傳感器被配置為在處理器的控制下執行如下操作：
獲得目標物體的目標物體位置；
在不經由AP的情況下，向顯示控制器提供目標物體位置。
在一些實施例中，顯示器件還可以包括顯示控制器，被配置為接收目標物體位置，據此對顯示器件的像素進行3D渲染。
在一些實施例中，位移傳感器的數量可以為一個或一個以上。
在一些實施例中，位移傳感器可以為攝像頭。
本公開實施例提供的電腦可讀存儲介質，存儲有電腦可執行指令，設置為執行上述的實現目標物體定位的方法。
本公開實施例提供的電腦程式產品，包括存儲在電腦可讀存儲介質上的電腦程式，該電腦程式包括程式指令，當該程式指令被電腦執行時，使電腦執行上述的實現目標物體定位的方法。
本公開實施例提供的實現目標物體定位的方法、裝置及顯示器件、電腦可讀存儲介質、電腦程式產品，可以實現以下技術效果：
儘量避免應用處理器因處理目標物體位置而導致的大量資源佔用。
以上的總體描述和下文中的描述僅是示例性和解釋性的，不用於限制本申請。
為了能夠更加詳盡地瞭解本公開實施例的特點與技術內容，下面結合附圖對本公開實施例的實現進行詳細闡述，所附附圖僅供參考說明之用，並非用來限定本公開實施例。在以下的技術描述中，為方便解釋起見，通過多個細節以提供對所披露實施例的充分理解。然而，在沒有這些細節的情況下，至少一個實施例仍然可以實施。在其它情況下，為簡化附圖，熟知的結構和裝置可以簡化展示。
參見圖1，本公開實施例提供了一種實現目標物體定位的方法，包括：
S100：獲得目標物體的目標物體位置；
S200：在不經由AP的情況下，向顯示控制器提供目標物體位置。
這樣，在得到目標物體的目標物體位置後，可以在不經由AP的情況下向顯示控制器提供目標物體位置，因此能夠儘量避免因處理目標物體位置而導致AP的資源被大量佔用的問題。
在一些實施例中，可以通過位移傳感器獲得目標物體的目標物體位置。
在一些實施例中，在不經由AP的情況下，向顯示控制器提供目標物體位置，可以包括：
通過不經由AP的目標物體位置傳輸通路，向顯示控制器提供目標物體位置。
在一些實施例中，目標物體位置傳輸通路可以是有線通路，也可以是無線通路。
在一些實施例中，還可以確定目標物體位置傳輸通路。
在一些實施例中，確定目標物體位置傳輸通路，可以包括：
將預先設置的不經由AP的傳輸通路作為目標物體位置傳輸通路；或
在至少兩條傳輸通路中選擇不經由AP的傳輸通路，將選擇的不經由AP的傳輸通路作為目標物體位置傳輸通路；或
將經由AP的傳輸通路排除出目標物體位置傳輸通路。
在一些實施例中，不經由AP的上述傳輸通路能夠連接（有線連接或無線連接）至顯示控制器。當這樣的傳輸通路為兩條或兩條以上時，可以將其中的一條確定為目標物體位置傳輸通路。可選地，可以基於傳輸通路的負載、準確率、魯棒性等實際情況確定目標物體位置傳輸通路，例如：將兩條以上的上述傳輸通路中負載最低的傳輸通路確定為目標物體位置傳輸通路；或，將兩條以上的上述傳輸通路中準確率最高的傳輸通路確定為目標物體位置傳輸通路；或，將兩條以上的上述傳輸通路中魯棒性最高的傳輸通路確定為目標物體位置傳輸通路。可選地，也可以將兩條以上的上述傳輸通路中的任一條確定為目標物體位置傳輸通路。
在一些實施例中，當確定的目標物體位置傳輸通路因故障、參數（例如：負載、準確率、魯棒性，等）變化等情況導致不適合傳輸目標物體位置時，可以重新確定能夠傳輸目標物體位置的目標物體位置傳輸通路。
在一些實施例中，顯示控制器可以是時序控制器T-con。
在一些實施例中，顯示控制器也可以是除了T-con以外的能夠對顯示進行控制的器件。
在一些實施例中，提供目標物體位置，可以包括：
針對顯示控制器，主動或被動地發送目標物體位置。
在一些實施例中，也可以針對其他的目標物體位置的需求端主動或被動地發送目標物體位置。可選地，目標物體位置的需求端可以是服務器、應用處理器、路由器、用戶終端，等。
在一些實施例中，主動地發送目標物體位置，可以包括：實時或週期性地發送目標物體位置。
在一些實施例中，在實時發送目標物體位置的情況下，可以在獲取到目標物體位置後就實時發送目標物體位置。
在一些實施例中，在週期性地發送目標物體位置的情況下，可以根據應用場景、位移傳感器的使用時長、工作負載等實際情況考慮對目標物體位置進行發送的發送週期。可選地，可以預先設置發送週期；例如：將發送週期設置為1秒、1分鐘、1小時等特定時長或大於等於1秒小於等於1小時等特定時長範圍。
在一些實施例中，還可以在滿足目標物體位置的發送條件的情況下發送目標物體位置。
在一些實施例中，在滿足目標物體位置的發送條件的情況下發送目標物體位置的情況下，可以根據應用場景、位移傳感器的使用時長、工作負載等實際情況考慮目標物體位置的發送條件。可選地，可以設置發送條件為：在獲取到的目標物體位置數量達到10、50、80等特定值或大於等於10小於等於80等特定值範圍的情況下發送目標物體位置；或，可以設置發送條件為：在位移傳感器關機前發送目標物體位置；例如：在位移傳感器收到關機信號時，或在位移傳感器收到關機信號後、且完成關機之前發送目標物體位置。
在一些實施例中，被動地發送目標物體位置，可以包括：基於接收到的請求發送目標物體位置。
在一些實施例中，在被動地發送目標物體位置的情況下，可以在接收到針對目標物體位置的請求時，或在接收到針對目標物體位置的請求後的特定時間發送目標物體位置。可選地，針對目標物體位置的請求可以是用於讀取目標物體位置的讀請求；或者，也可以是涉及到或需要用到目標物體位置的其他請求，例如：請求A並不用於直接讀取目標物體位置，而是用於觸發目標物體定位操作；那麼，位移傳感器可以在接收到請求A後發送目標物體位置。可選地，上述的請求可以以電腦指令等能夠識別的形式存在。
在一些實施例中，發送目標物體位置，可以包括：
直接或間接地向顯示控制器發送目標物體位置。
在一些實施例中，在直接向顯示控制器等需求端發送目標物體位置的情況下，位移傳感器可以與需求端直接連接（例如：有線連接或無線連接），以便直接向需求端發送目標物體位置。
在一些實施例中，在間接向顯示控制器等需求端發送目標物體位置的情況下，位移傳感器可以與需求端間接連接，例如：位移傳感器與需求端之間可以連接（例如：有線連接或無線連接）有中間節點（例如：服務器、應用處理器、路由器，等），位移傳感器可以通過中間節點間接向需求端發送目標物體位置。
參見圖2，在一些實施例中，獲得目標物體的目標物體位置，可以包括：
S110：獲得目標物體的目標物體圖像；
S120：基於目標物體圖像獲得目標物體的目標物體位置。
在一些實施例中，獲得目標物體的目標物體圖像，可以包括：
通過位移傳感器獲得目標物體圖像；
其中，目標物體可以包括用戶的眼部，目標物體圖像可以包含眼部的眼部空間信息。
在一些實施例中，也可以通過位移傳感器以外的器件獲得目標物體圖像。
在一些實施例中，眼部空間信息可以包括眼部平面位置信息；
獲得目標物體的目標物體位置，可以包括：
根據目標物體圖像中包含的眼部平面位置信息得到眼部深度信息，從而獲得眼部的空間坐標。
在一些實施例中，通過位移傳感器獲取的眼部平面位置信息中包含眼部深度信息，進而可以根據眼部平面位置信息得到眼部深度信息，並將眼部深度信息轉化為用戶眼部的空間坐標。
在一些實施例中，還可以移除目標物體圖像。
在一些實施例中，移除目標物體圖像，可以包括：
將位移傳感器中的目標物體圖像轉移至位移傳感器以外的實體，以使得位移傳感器中不存在目標物體圖像；
或
將位移傳感器中的目標物體圖像刪除。
在一些實施例中，將位移傳感器中的目標物體圖像轉移至位移傳感器以外的實體時，可以將位移傳感器中的目標物體圖像的原數據轉移至位移傳感器以外的實體，以使得位移傳感器中不存在目標物體圖像。可選地，也可以將位移傳感器中的目標物體圖像的副本轉移至位移傳感器以外的實體，並將位移傳感器中的目標物體圖像的原數據刪除，以使得位移傳感器中不存在目標物體圖像。可選地，無論是目標物體圖像的原數據還是副本，在將目標物體圖像轉移至位移傳感器以外的實體時，均可通過有線或無線的方式將目標物體圖像傳輸給位移傳感器以外的實體。可選地，上述的位移傳感器以外的實體可以是需要對目標物體圖像進行緩存等後續處理的實體，例如：緩存器、圖像處理器，等。可選地，上述的位移傳感器以外的實體在對目標物體圖像進行緩存等後續處理後，也可以將該目標物體圖像刪除。
在一些實施例中，將目標物體圖像轉移至實體，可以包括：
將目標物體圖像轉移至能夠刪除目標物體圖像的實體。
在一些實施例中，上述的位移傳感器以外的實體可以是能夠刪除目標物體圖像的實體，例如：專門用於刪除目標物體圖像的圖像處理器、文件處理器等。可選地，上述的位移傳感器以外的實體可以在刪除目標物體圖像之前緩存該目標物體圖像。
在一些實施例中，上述的實體可以是硬件實體，例如：能夠對目標物體圖像進行處理的物理器件。可選地，上述的實體也可以是軟件實體，例如：能夠對目標物體圖像進行處理的邏輯軟件。
參見圖3A、圖3B、圖3C，在一些實施例中，移除目標物體圖像，可以包括：
基於目標物體圖像獲得目標物體的目標物體位置之後，立即移除目標物體圖像；或
提供目標物體位置之後，立即移除目標物體圖像；或
基於目標物體圖像獲得目標物體的目標物體位置、或提供目標物體位置之後，在滿足移除條件時移除目標物體圖像。
在一些實施例中，參見圖3A，移除目標物體圖像，可以包括：
S310：基於目標物體圖像獲得目標物體的目標物體位置；
S311：立即移除目標物體圖像。
由圖3A可見，可以在獲得目標物體位置之後立即移除目標物體圖像。
在一些實施例中，參見圖3B，移除目標物體圖像，可以包括：
S320：提供目標物體位置；
S321：立即移除目標物體圖像。
由圖3B可見，可以在提供目標物體位置之後立即移除目標物體圖像。
在一些實施例中，參見圖3C，移除目標物體圖像，可以包括：
S330：基於目標物體圖像獲得目標物體的目標物體位置、或提供目標物體位置；
S331：在滿足移除條件時移除目標物體圖像。
由圖3C可見，可以在獲得目標物體位置之後，或提供目標物體位置之後，在滿足移除條件時移除目標物體圖像。
在一些實施例中，可以根據應用場景、位移傳感器的使用時長、工作負載等實際情況考慮移除條件。可選地，可以設置移除條件為：在位移傳感器的工作負載達到20%、50%、80%等特定值或大於等於20%小於等於80%等特定值範圍的情況下移除目標物體圖像。
在一些實施例中，目標物體圖像可以包括2D圖像或3D圖像。
參見圖4，本公開實施例提供了一種實現目標物體定位的裝置100，包括處理器110和存儲有程式指令的記憶體120，處理器110被配置為在執行程式指令時，執行上述的實現目標物體定位的方法。
在一些實施例中，圖4所示的實現目標物體定位的裝置，可以包括：
處理器（processor）110和記憶體（memory）120，還可以包括通信接口（Communication Interface）130和匯流排140。其中，處理器110、通信接口130、記憶體120可以通過匯流排140完成相互間的通信。通信接口130可以用於信息傳輸。處理器110可以調用記憶體120中的邏輯指令，以執行上述實施例的實現目標物體定位的方法。
此外，上述的記憶體120中的邏輯指令可以通過軟件功能單元的形式實現並作為獨立的產品銷售或使用時，可以存儲在一個電腦可讀取存儲介質中。
記憶體120作為一種電腦可讀存儲介質，可用於存儲軟件程式、電腦可執行程式，如本公開實施例中的方法對應的程式指令/模塊。處理器110通過運行存儲在記憶體120中的程式指令/模塊，從而執行功能應用以及數據處理，即實現上述方法實施例中的實現目標物體定位的方法。
記憶體120可包括存儲程式區和存儲數據區，其中，存儲程式區可存儲操作系統、至少一個功能所需的應用程式；存儲數據區可存儲根據終端設備的使用所創建的數據等。此外，記憶體120可以包括高速隨機存取記憶體，還可以包括非易失性記憶體。
參見圖5，本公開實施例提供了一種顯示器件200，包括：位移傳感器210以及上述的實現目標物體定位的裝置100；其中，位移傳感器210被配置為在處理器110的控制下執行如下操作：
獲得目標物體的目標物體位置；
在不經由AP的情況下，向顯示控制器提供目標物體位置。
在一些實施例中，位移傳感器210能夠執行的上述操作，可以參見前述的相應描述，例如：包括圖1至圖4以及相對應的技術描述，在此不再贅述。
參見圖6，在一些實施例中，顯示器件200還可以包括顯示控制器220，被配置為接收目標物體位置，據此對顯示器件200的像素進行3D渲染，例如：根據目標物體位置分配用於形成左眼圖像的像素和用於形成右眼圖像的像素，基於分配的像素進行3D圖像顯示。
在一些實施例中，顯示控制器220可以是T-con。
參見圖7，在一些實施例中，位移傳感器210的數量可以為一個或一個以上，例如：一個、兩個、三個或更多。
在一些實施例中，位移傳感器210可以為攝像頭。可選地，位移傳感器210也可以是雷達等能夠獲得目標物體圖像的器件。
在一些實施例中，可以通過至少兩個位移傳感器210獲取包含眼部空間信息的目標物體圖像，該眼部空間信息中包含眼部平面位置信息。可選地，對具有不同拍攝角度的至少兩個位移傳感器210所獲得的相應至少兩個目標物體圖像進行合成等處理後，獲得的目標物體圖像中所包含的眼部平面位置信息中包含眼部深度信息，進而可以根據目標物體圖像中包含的眼部平面位置信息得到眼部深度信息，並將眼部深度信息轉化為用戶眼部的空間坐標。
在一些實施例中，顯示器件200還可以包括用於支持顯示器件200正常運轉的其他構件，例如：通信接口、框架、控制電路等構件中的至少之一。
在一些實施例中，上述的眼部可以包括眼球，例如用戶雙眼的眼球。
在一些實施例中，位移傳感器210也可以通過確定眼球的視軸等方式確定用戶的觀看角度/位置。
本公開實施例提供的實現目標物體定位的方法、裝置及顯示器件，能夠儘量避免應用處理器因處理目標物體位置而導致的大量資源佔用。
本公開實施例提供了一種電腦可讀存儲介質，存儲有電腦可執行指令，該電腦可執行指令設置為執行上述的實現目標物體定位的方法。
本公開實施例提供了一種電腦程式產品，包括存儲在電腦可讀存儲介質上的電腦程式，該電腦程式包括程式指令，當該程式指令被電腦執行時，使上述電腦執行上述的實現目標物體定位的方法。
上述的電腦可讀存儲介質可以是暫態電腦可讀存儲介質，也可以是非暫態電腦可讀存儲介質。
本公開實施例提供的電腦可讀存儲介質和電腦程式產品，能夠儘量避免應用處理器因處理目標物體位置而導致的大量資源佔用。
本公開實施例的技術方案可以以軟件產品的形式體現出來，該電腦軟件產品存儲在一個存儲介質中，包括至少一個指令用以使得一台電腦設備（可以是個人電腦，服務器，或者網絡設備等）執行本公開實施例的方法的全部或部分步驟。而前述的存儲介質可以是非暫態存儲介質，包括：U盤、移動硬碟、唯讀記憶體（ROM，Read-Only Memory）、隨機存取記憶體（RAM，Random Access Memory）、磁碟或者光碟等多種可以存儲程式代碼的介質，也可以是暫態存儲介質。
以上描述和附圖充分地示出了本公開的實施例，以使本領域技術人員能夠實踐它們。其他實施例可以包括結構的、邏輯的、電氣的、過程的以及其他的改變。實施例僅代表可能的變化。除非明確要求，否則單獨的部件和功能是可選的，並且操作的順序可以變化。一些實施例的部分和特徵可以被包括在或替換其他實施例的部分和特徵。本公開實施例的範圍包括申請專利範圍的整個範圍，以及申請專利範圍的所有可獲得的等同物。當用於本申請中時，雖然術語“第一”、“第二”等可能會在本申請中使用以描述各元件，但這些元件不應受到這些術語的限制。這些術語僅用於將一個元件與另一個元件區別開。比如，在不改變描述的含義的情況下，第一元件可以叫做第二元件，並且同樣地，第二元件可以叫做第一元件，只要所有出現的“第一元件”一致重命名並且所有出現的“第二元件”一致重命名即可。第一元件和第二元件都是元件，但可以不是相同的元件。而且，本申請中使用的用詞僅用於描述實施例並且不用於限制申請專利範圍。如在實施例以及申請專利範圍的描述中使用的，除非上下文清楚地表明，否則單數形式的“一個”（a）、“一個”（an）和“所述”（the）旨在同樣包括複數形式。類似地，如在本申請中所使用的術語“和/或”是指包含一個或一個以上相關聯的列出的任何以及所有可能的組合。另外，當用於本申請中時，術語“包括”（comprise）及其變型“包括”（comprises）和/或包括（comprising）等指陳述的特徵、整體、步驟、操作、元素，和/或組件的存在，但不排除一個或一個以上其它特徵、整體、步驟、操作、元素、組件和/或這些的分組的存在或添加。在沒有更多限制的情況下，由語句“包括一個…”限定的要素，並不排除在包括該要素的過程、方法或者設備中還存在另外的相同要素。本文中，每個實施例重點說明的可以是與其他實施例的不同之處，各個實施例之間相同相似部分可以互相參見。對於實施例公開的方法、產品等而言，如果其與實施例公開的方法部分相對應，那麼相關之處可以參見方法部分的描述。
本領域技術人員可以意識到，結合本文中所公開的實施例描述的各示例的單元及算法步驟，能夠以電子硬件、或者電腦軟件和電子硬件的結合來實現。這些功能究竟以硬件還是軟件方式來執行，可以取決於技術方案的特定應用和設計約束條件。本領域技術人員可以對每個特定的應用來使用不同方法以實現所描述的功能，但是這種實現不應認為超出本公開實施例的範圍。本領域技術人員可以清楚地瞭解到，為描述的方便和簡潔，上述描述的系統、裝置和單元的工作過程，可以參考前述方法實施例中的對應過程，在此不再贅述。
本文所披露的實施例中，所揭露的方法、產品（包括但不限於裝置、設備等），可以通過其它的方式實現。例如，以上所描述的裝置實施例僅僅是示意性的，例如，單元的劃分，可以僅僅為一種邏輯功能劃分，實際實現時可以有另外的劃分方式，例如多個單元或組件可以結合或者可以集成到另一個系統，或一些特徵可以忽略，或不執行。另外，所顯示或討論的相互之間的耦合或直接耦合或通信連接可以是通過一些接口，裝置或單元的間接耦合或通信連接，可以是電性，機械或其它的形式。作為分離部件說明的單元可以是或者也可以不是物理上分開的，作為單元顯示的部件可以是或者也可以不是物理單元，即可以位於一個地方，或者也可以分佈到多個網絡單元上。可以根據實際的需要選擇其中的部分或者全部單元來實現本實施例。另外，在本公開實施例中的各功能單元可以集成在一個處理單元中，也可以是各個單元單獨物理存在，也可以兩個或兩個以上單元集成在一個單元中。
在附圖中，考慮到清楚性和描述性，可以誇大元件或層等結構的寬度、長度、厚度等。當元件或層等結構被稱為“設置在”（或“安裝在”、“鋪設在”、“貼合在”、“塗布在”等類似描述）另一元件或層“上方”或“上”時，該元件或層等結構可以直接“設置在”上述的另一元件或層“上方”或“上”，或者可以存在與上述的另一元件或層之間的中間元件或層等結構，甚至有一部分嵌入上述的另一元件或層。
附圖中的流程圖和方塊圖顯示了根據本公開實施例的系統、方法和電腦程式產品的可能實現的體系架構、功能和操作。在這點上，流程圖或方塊圖中的每個方框可以代表一個模塊、程式段或代碼的一部分，上述模塊、程式段或代碼的一部分包含至少一個用於實現規定的邏輯功能的可執行指令。在有些作為替換的實現中，方框中所標注的功能也可以以不同於附圖中所標注的順序發生。例如，兩個連續的方框實際上可以基本並行地執行，它們有時也可以按相反的順序執行，這可以依所涉及的功能而定。在附圖中的流程圖和方塊圖所對應的描述中，不同的方框所對應的操作或步驟也可以以不同於描述中所披露的順序發生，有時不同的操作或步驟之間不存在特定的順序。例如，兩個連續的操作或步驟實際上可以基本並行地執行，它們有時也可以按相反的順序執行，這可以依所涉及的功能而定。方塊圖和/或流程圖中的每個方框、以及方塊圖和/或流程圖中的方框的組合，可以用執行規定的功能或動作的專用的基於硬件的系統來實現，或者可以用專用硬件與電腦指令的組合來實現。
100:實現目標物體定位的裝置 110:處理器 120:記憶體 130:通信接口 140:匯流排 200:顯示器件 210:位移傳感器 220:顯示控制器
至少一個實施例通過與之對應的附圖進行示例性說明，這些示例性說明和附圖並不構成對實施例的限定，附圖中具有相同參考數字標號的元件示為類似的元件，附圖不構成比例限制，並且其中：
圖1是本公開實施例提供的實現目標物體定位的流程示意圖；
圖2是本公開實施例提供的獲得目標物體位置的流程示意圖；
圖3A、圖3B、圖3C是本公開實施例提供的移除目標物體圖像的流程示意圖；
圖4是本公開實施例提供的實現目標物體定位的裝置示意圖；
圖5是本公開實施例提供的顯示器件的結構示意圖；
圖6是本公開實施例提供的顯示器件的另一結構示意圖；
圖7是本公開實施例提供的顯示器件的另一結構示意圖。

Claims (23)

  1. 一種實現目標物體定位的方法，包括： 獲得目標物體的目標物體位置； 在不經由應用處理器AP的情況下，向顯示控制器提供所述目標物體位置。
  2. 如請求項1所述的實現目標物體定位的方法，其中，在不經由所述AP的情況下，向顯示控制器提供所述目標物體位置，包括： 通過不經由所述AP的目標物體位置傳輸通路，向所述顯示控制器提供所述目標物體位置。
  3. 如請求項2所述的實現目標物體定位的方法，還包括：確定所述目標物體位置傳輸通路。
  4. 如請求項3所述的實現目標物體定位的方法，其中，確定所述目標物體位置傳輸通路，包括： 將預先設置的不經由所述AP的傳輸通路作為所述目標物體位置傳輸通路；或 在至少兩條傳輸通路中選擇不經由所述AP的傳輸通路，將選擇的不經由所述AP的所述傳輸通路作為所述目標物體位置傳輸通路；或 將經由所述AP的傳輸通路排除出所述目標物體位置傳輸通路。
  5. 如請求項1所述的實現目標物體定位的方法，其中，所述顯示控制器是時序控制器T-con。
  6. 如請求項1至5任一項所述的實現目標物體定位的方法，其中，提供所述目標物體位置，包括： 針對所述顯示控制器，主動或被動地發送所述目標物體位置。
  7. 如請求項6所述的實現目標物體定位的方法，其中， 主動地發送所述目標物體位置，包括：實時或週期性地發送所述目標物體位置；或， 被動地發送所述目標物體位置，包括：基於接收到的請求發送所述目標物體位置。
  8. 如請求項6所述的實現目標物體定位的方法，其中，發送所述目標物體位置，包括： 直接或間接地向所述顯示控制器發送所述目標物體位置。
  9. 如請求項1至8中任一項所述的實現目標物體定位的方法，其中，所述獲得目標物體的目標物體位置，包括： 獲得目標物體的目標物體圖像，基於所述目標物體圖像獲得所述目標物體的目標物體位置。
  10. 如請求項9所述的實現目標物體定位的方法，其中，所述獲得目標物體的目標物體圖像，包括： 通過位移傳感器獲得所述目標物體圖像； 其中，所述目標物體包括用戶的眼部，所述目標物體圖像包含所述眼部的眼部空間信息。
  11. 如請求項10所述的實現目標物體定位的方法，其中，所述眼部空間信息包括眼部平面位置信息； 獲得所述目標物體的目標物體位置，包括： 根據所述目標物體圖像中包含的眼部平面位置信息得到眼部深度信息，從而獲得所述眼部的空間坐標。
  12. 如請求項9所述的實現目標物體定位的方法，還包括：移除所述目標物體圖像。
  13. 如請求項12所述的實現目標物體定位的方法，其中，移除所述目標物體圖像，包括： 將所述位移傳感器中的所述目標物體圖像轉移至所述位移傳感器以外的實體，以使得所述位移傳感器中不存在所述目標物體圖像；或 將所述位移傳感器中的所述目標物體圖像刪除。
  14. 如請求項13所述的實現目標物體定位的方法，其中，將所述目標物體圖像轉移至所述實體，包括： 將所述目標物體圖像轉移至能夠刪除所述目標物體圖像的所述實體。
  15. 如請求項13所述的實現目標物體定位的方法，其中，移除所述目標物體圖像，包括： 基於所述目標物體圖像獲得所述目標物體的目標物體位置之後，立即移除所述目標物體圖像；或 提供所述目標物體位置之後，立即移除所述目標物體圖像；或 基於所述目標物體圖像獲得所述目標物體的目標物體位置、或提供所述目標物體位置之後，在滿足移除條件時移除所述目標物體圖像。
  16. 如請求項9所述的實現目標物體定位的方法，其中，所述目標物體圖像包括2D圖像或3D圖像。
  17. 一種實現目標物體定位的裝置，包括處理器和存儲有程式指令的記憶體，所述處理器被配置為在執行所述程式指令時，執行如請求項1至16中任一項所述的實現目標物體定位的方法。
  18. 一種顯示器件，包括：位移傳感器以及如請求項17所述的實現目標物體定位的裝置； 其中，所述位移傳感器被配置為在所述處理器的控制下執行如下操作： 獲得目標物體的目標物體位置； 在不經由AP的情況下，向顯示控制器提供所述目標物體位置。
  19. 如請求項18所述的顯示器件，還包括顯示控制器，被配置為接收所述目標物體位置，據此對所述顯示器件的像素進行3D渲染。
  20. 如請求項18或19所述的顯示器件，其中，所述位移傳感器的數量為一個或一個以上。
  21. 如請求項20所述的顯示器件，其中，所述位移傳感器為攝像頭。
  22. 一種電腦可讀存儲介質，存儲有電腦可執行指令，所述電腦可執行指令設置為執行如請求項1至16中任一項所述的實現目標物體定位的方法。
  23. 一種電腦程式產品，包括存儲在電腦可讀存儲介質上的電腦程式，所述電腦程式包括程式指令，當該程式指令被電腦執行時，使所述電腦執行如請求項1至16中任一項所述的實現目標物體定位的方法。
TW110125728A 2020-07-15 2021-07-13 實現目標物體定位的方法、裝置及顯示器件 TWI816153B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202010681260.5 2020-07-15
CN202010681260.5A CN113947652A (zh) 2020-07-15 2020-07-15 实现目标物体定位的方法、装置及显示器件

Publications (2)

Publication Number Publication Date
TW202205090A true TW202205090A (zh) 2022-02-01
TWI816153B TWI816153B (zh) 2023-09-21

Family

ID=79325902

Family Applications (1)

Application Number Title Priority Date Filing Date
TW110125728A TWI816153B (zh) 2020-07-15 2021-07-13 實現目標物體定位的方法、裝置及顯示器件

Country Status (5)

Country Link
US (1) US20230326431A1 (zh)
EP (1) EP4184915A4 (zh)
CN (1) CN113947652A (zh)
TW (1) TWI816153B (zh)
WO (1) WO2022012455A1 (zh)

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4760973B2 (ja) * 2008-12-16 2011-08-31 カシオ計算機株式会社 撮像装置及び画像処理方法
KR101449748B1 (ko) * 2011-08-18 2014-10-13 엘지디스플레이 주식회사 입체영상 디스플레이장치 및 그 구동 방법
KR101931085B1 (ko) * 2012-09-03 2018-12-21 삼성디스플레이 주식회사 입체 영상 표시 장치
TWI603288B (zh) * 2013-10-15 2017-10-21 萬里科技股份有限公司 在３ｄ空間中將３ｄ幾何數據用於虛擬實境圖像的呈現和控制的方法
US9532714B2 (en) * 2014-01-21 2017-01-03 Osterhout Group, Inc. Eye imaging in head worn computing
KR20160063834A (ko) * 2014-11-27 2016-06-07 삼성전자주식회사 포인팅 장치, 인터페이스 장치 및 디스플레이 장치
CN105812776A (zh) * 2014-12-29 2016-07-27 广东省明医医疗慈善基金会 基于软镜的立体显示系统及方法
CN105812774B (zh) * 2014-12-29 2019-05-21 广东省明医医疗慈善基金会 基于插管镜的立体显示系统及方法
JP7050067B2 (ja) * 2016-12-14 2022-04-07 サムスン エレクトロニクス カンパニー リミテッド ディスプレイ装置及びその制御方法
KR102463712B1 (ko) * 2017-11-24 2022-11-08 현대자동차주식회사 가상 터치 인식 장치 및 그의 인식 오류 보정 방법
KR102652943B1 (ko) * 2018-12-03 2024-03-29 삼성전자주식회사 3차원 영상 출력 방법 및 그 방법을 수행하는 전자 장치
CN112584124A (zh) * 2019-09-30 2021-03-30 北京芯海视界三维科技有限公司 实现3d显示的方法及装置、3d显示终端
CN113010020A (zh) * 2021-05-25 2021-06-22 北京芯海视界三维科技有限公司 一种时序控制器和显示设备

Also Published As

Publication number Publication date
EP4184915A1 (en) 2023-05-24
TWI816153B (zh) 2023-09-21
US20230326431A1 (en) 2023-10-12
EP4184915A4 (en) 2024-01-10
CN113947652A (zh) 2022-01-18
WO2022012455A1 (zh) 2022-01-20

Similar Documents

Publication Publication Date Title
JP4297197B2 (ja) キャリブレーション処理装置、およびキャリブレーション処理方法、並びにコンピュータ・プログラム
US20190289055A1 (en) Method and system for interactive transmission of panoramic video
TWI462052B (zh) Information processing system, information processing device, image capturing device and information processing method
TWI479318B (zh) Information processing apparatus, information processing method and location information
CN113874870A (zh) 基于图像的定位
WO2010028559A1 (zh) 图像拼接方法及装置
WO2016045425A1 (zh) 一种两视点立体图像合成方法及系统
KR102450236B1 (ko) 전자 장치, 그 제어 방법 및 컴퓨터 판독가능 기록 매체
KR20160023866A (ko) 입체 장면들의 인터리빙된 타일형 렌더링
JP2022046260A5 (ja) 画像処理装置、画像処理方法、記録媒体およびプログラム
KR20180106549A (ko) 360도 파노라마 영상 콘텐츠 처리 장치 및 그 제어방법
EP2781099A1 (en) Apparatus and method for real-time capable disparity estimation for virtual view rendering suitable for multi-threaded execution
CN109785265A (zh) 畸变矫正图像处理方法及图像处理装置
WO2022012455A1 (zh) 实现目标物体定位的方法、装置及显示器件
WO2022012454A1 (zh) 实现目标物体定位的方法、装置及显示器件
WO2023221885A1 (zh) 显示模式确定方法及显示模式确定装置
WO2020127185A1 (en) Cloud-based camera calibration
US9519487B2 (en) System-on-chip and method of operating the same
TW202129363A (zh) 實現3d顯示的方法、裝置及3d顯示系統
WO2022033314A1 (zh) 3d显示方法、3d显示装置及3d显示器件
KR102543136B1 (ko) 클라우드 vr 기반의 3차원 영상 제공 방법
US20230093933A1 (en) Low latency augmented reality architecture for camera enabled devices
US20240233205A1 (en) Perspective Correction With Depth Clamping
WO2024093893A1 (zh) 空间现实显示方法、空间现实显示系统以及非易失性计算机可读存储介质
JP2022182120A (ja) 映像生成装置、映像処理システム、映像生成装置の制御方法及びプログラム