TWI791208B - 控制方法、電子設備及電腦可讀儲存媒介 - Google Patents

控制方法、電子設備及電腦可讀儲存媒介 Download PDF

Info

Publication number
TWI791208B
TWI791208B TW110112946A TW110112946A TWI791208B TW I791208 B TWI791208 B TW I791208B TW 110112946 A TW110112946 A TW 110112946A TW 110112946 A TW110112946 A TW 110112946A TW I791208 B TWI791208 B TW I791208B
Authority
TW
Taiwan
Prior art keywords
display screen
detection signal
detected
electronic device
acquisition module
Prior art date
Application number
TW110112946A
Other languages
English (en)
Other versions
TW202141972A (zh
Inventor
王路
Original Assignee
大陸商Oppo廣東移動通信有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 大陸商Oppo廣東移動通信有限公司 filed Critical 大陸商Oppo廣東移動通信有限公司
Publication of TW202141972A publication Critical patent/TW202141972A/zh
Application granted granted Critical
Publication of TWI791208B publication Critical patent/TWI791208B/zh

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/02Constructional features of telephone sets
    • H04M1/0202Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/026Details of the structure or mounting of specific components
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/02Constructional features of telephone sets
    • H04M1/0202Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/026Details of the structure or mounting of specific components
    • H04M1/0264Details of the structure or mounting of specific components for a camera module assembly
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/02Constructional features of telephone sets
    • H04M1/0202Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/026Details of the structure or mounting of specific components
    • H04M1/0266Details of the structure or mounting of specific components for a display module assembly
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72454User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00Reducing energy consumption in communication networks
    • Y02D30/70Reducing energy consumption in communication networks in wireless communication networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Environmental & Geological Engineering (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)

Abstract

一種控制方法、電子設備及電腦可讀儲存媒介。電子設備包括深度圖像獲取模組、殼體及顯示螢幕,深度圖像獲取模組設置在殼體內並位於顯示螢幕的下方,深度圖像獲取模組包括發射器及接收器。控制方法包括:在顯示螢幕刷新的同時,發射器向顯示螢幕方向發射檢測信號,接收器接收穿過顯示螢幕後經待檢測物反射後的檢測信號,以獲得待檢測物的深度訊息圖像。透過設置深度圖像獲取模組發射檢測信號的頻率與顯示螢幕刷新頻率保持同步,在顯示螢幕顯示圖像的同時驅動深度圖像獲取模組中的發射器發射檢測信號,避免顯示螢幕與深度圖像獲取模組閃爍。

Description

控制方法、電子設備及電腦可讀儲存媒介
本申請涉及影像技術領域,特別涉及一種控制方法、電子設備及電腦可讀儲存媒介。
隨著市場對手機大螢幕占比的要求越來越高,各手機廠商都在嘗試把各電子元件,例如攝影機放置到螢幕下方,既不影響拍照效果,也能正常顯示。另外,由於3D解鎖的盛行,越來越多的手機廠商開始考慮把3D解鎖用的深度相機放置在螢幕下方,然而,由於深度相機需要主動發出光線,主動發出的光線會在顯示螢幕對應區域引起明顯的閃爍,嚴重影響用戶體驗。
本申請實施方式提供了一種控制方法、電子設備及非揮發性電腦可讀儲存媒介。
本申請提供一種控制方法。控制方法用於電子設備,所述電子設備包括深度圖像獲取模組、殼體及顯示螢幕。所述深度圖像獲取模組設置在所述殼體內並位於所述顯示螢幕的下方,所述深度圖像獲取模組包括發射器及接收器。所述控制方法包括:在所述顯示螢幕刷新的同時,所述發射器向所述顯示螢幕方向發射檢測信號,所述接收器接收穿過所述顯示螢幕後經待檢測物反射後的所述檢測信號,以獲得所述待檢測物的深度訊息圖像。所述顯示螢幕的刷新頻率與所述發射器的投射頻率相同。
本申請提供一種電子設備。所述電子設備包括殼體、顯示螢幕及深度圖像獲取模組。所述顯示螢幕設置在所述殼體上。所述深度圖像獲取模組設置在所述殼體內並位於所述顯示螢幕的下方,所述深度圖像獲取模組包括發射器及接收器。所述顯示螢幕顯示圖像的同時,所述發射器向所述顯示螢幕方向發射檢測信號,所述接收器接收穿過所述顯示螢幕後被待檢測物反射回的所述檢測信號以獲得所述待檢測物的深度訊息圖像。所述顯示螢幕的刷新頻率與所述發射器的投射頻率相同。
本申請提供一種非揮發性電腦可讀儲存媒介。所述非揮發性電腦可讀儲存媒介包含電腦程式,所述電腦程式被處理器執行時,使得所述處理器執行:在所述顯示螢幕刷新的同時,所述發射器向所述顯示螢幕方向發射檢測信號,所述接收器接收穿過所述顯示螢幕後經待檢測物反射後的所述檢測信號,以獲得所述待檢測物的深度訊息圖像;所述顯示螢幕的刷新頻率與所述發射器的投射頻率相同。
本申請提供的控制方法、電子設備及非揮發性電腦可讀儲存媒介透過設置深度圖像獲取模組發射檢測信號的頻率與顯示螢幕刷新頻率保持同步,在顯示螢幕顯示圖像的同時驅動深度圖像獲取模組中的發射器發射檢測信號,避免顯示螢幕與深度圖像獲取模組相對應的區域出現明顯閃爍,從而提升用戶體驗。
本申請實施方式的附加方面和優點將在下面的描述中部分給出,部分將從下面的描述中變得明顯,或透過本申請的實踐瞭解到。
下面詳細描述本申請的實施方式,所述實施方式的示例在附圖中示出,其中,相同或類似的符號自始至終表示相同或類似的元件或具有相同或類似功能的元件。下面透過參考附圖描述的實施方式是示例性的,僅用於解釋本申請的實施方式,而不能理解為對本申請的實施方式的限制。
請參閱圖1、圖2及圖5,本申請提供一種用於電子設備100的控制方法。電子設備100包括深度圖像獲取模組30、殼體20及顯示螢幕10,深度圖像獲取模組30設置在殼體20內並位於顯示螢幕10的下方,深度圖像獲取模組30包括發射器31及接收器32;控制方法包括步驟:
01:在顯示螢幕10刷新的同時,發射器31向顯示螢幕10方向發射檢測信號,接收器32接收穿過顯示螢幕10後經待檢測物反射後的檢測信號,以獲得待檢測物的深度訊息圖像;其中,顯示螢幕10的刷新頻率與發射器31的投射頻率相同。
需要說明的是,在顯示螢幕10開啟並顯示畫面後,顯示螢幕10會以一定的刷新頻率進行刷新,刷新的過程就是顯示圖像、不顯示圖像、顯示圖像、不顯示圖像交替重複出現的過程,由於刷新過程中顯示螢幕10不顯示圖像的時間很短可以忽略不計,所以在用戶看來顯示螢幕10開啟後是持續顯示圖像的。
請參閱圖1及圖2,本申請還提供一種電子設備100。本申請實施方式的控制方法可以由本申請實施方式的電子設備100實現。電子設備100包括顯示螢幕10、殼體20及深度圖像獲取模組30。顯示螢幕10設置在殼體20上,深度圖像獲取模組30設置在殼體20內並位於顯示螢幕10的下方,深度圖像獲取模30包括發射器31及接收器32;在顯示螢幕10顯示圖像的同時,發射器31向顯示螢幕10方向發射檢測信號,接收器32接收穿過顯示螢幕10後被待檢測物反射回的檢測信號以獲得待檢測物的深度訊息圖像,顯示螢幕10的刷新頻率與發射器31的投射頻率相同。
需要說明的是,電子設備100可以是手機、平板電腦、筆記型電腦、智慧手環、智慧手錶、智慧眼鏡等。本申請以電子設備100是手機為例進行說明。
具體地,請參閱圖1、圖2及圖3,殼體20包括相背設置的第一面21及第二面22。顯示螢幕10包括第一基板11及第二基板13,第二基板13設置在第一基板11的一側,第二基板13上開設有至少一個通孔133。顯示螢幕10設置在殼體20的第一面21上,並且顯示螢幕10與殼體20形成收容空間23。
深度圖像獲取模組30設置在殼體20內並位於顯示螢幕10的下方,即深度圖像獲取模組30收容於顯示螢幕10與殼體20形成的收容空間23內。深度圖像獲取模組30包括發射器31及接收器32,當通孔133的數量為一個時,發射器31與接收器32均收容在通孔133內。當通孔133的數量為兩個時,發射器31與接收器32分別收容在兩個通孔133內。
在顯示螢幕10顯示圖像的同時,即顯示螢幕10刷新的同時,發射器31向顯示螢幕10方向發射檢測信號,接收器32接收穿過顯示螢幕10後被待檢測物反射回的檢測信號以獲得待檢測物的深度訊息圖像。示例地,圖4是顯示螢幕10的刷新頻率與發射器31發射檢測信號的發射頻率的示意圖。如圖4所示,在第T0時刻,顯示螢幕10不顯示圖像,發射器31也不發射檢測信號;在第T1時刻,顯示螢幕10開始顯示圖像,發射器31開始發射檢測信號;在T2時刻,顯示螢幕10結束顯示圖像,發射器31結束發射檢測信號。由於在顯示螢幕10刷新(顯示螢幕10顯示圖像)的同時驅動深度圖像獲取模組30中的發射器31發射檢測信號,避免顯示螢幕10與深度圖像獲取模組30相對應的區域出現明顯閃爍,從而提升用戶體驗。
在一些實施例中,顯示螢幕10還包括連接層12。連接層12用於連接第一基板11及第二基板13,並且連接層12折射率與通孔133內空氣的折射率幾乎接近,二者之間的差值在預定範圍(小範圍)內。例如,假設預定範圍為(-0.5,0.5),則連接層12的折射率可以與空氣的折射率之間的差值可以為:-0.49、-0.2、-0.1、-0.23、0、0.11、0.2、0.33、0.45等等。由於連接層12的折射率與通孔133內空氣的折射率之間的差值在預定範圍內,顯示螢幕10內部光線在未開設通孔133區域朝向顯示螢幕10內部反射的光線量與光線在開設通孔133區域朝向顯示螢幕10內部反射的光線量相同,從而避免顯示螢幕10在設置有深度圖像獲取模組30的區域與其他區域出現顯示不一致的現象,由此進一步能減少明顯閃爍現象。
請參閱圖6,步驟01:在顯示螢幕10刷新的同時,發射器31向顯示螢幕10方向發射檢測信號,接收器32接收穿過顯示螢幕10後經待檢測物反射後的檢測信號,以獲得待檢測物的深度訊息圖像包括:
011:以第一功率朝待檢測物發射第一檢測信號;
012:接收穿過顯示螢幕10後被待檢測物反射回的第一檢測信號以獲取待檢測物與電子設備100的距離;
013:以第二功率朝待檢測物發射第二檢測信號,第二功率是根據距離從預存的距離-功率對應關係中獲取的;
014:接收穿過顯示螢幕10後被待檢測物反射回的第二檢測信號以獲取待檢測物的深度訊息圖像。
具體地,請參閱圖2及圖6,深度圖像獲取模組30包括發射器31及接收器32。發射器31用於以第一功率朝待檢測物發射第一檢測信號;接收器32用於接收穿過顯示螢幕10後被待檢測物反射回的第一檢測信號以獲取待檢測物與電子設備100的距離;深度圖像獲取模組30還用於根據距離從預存的距離-功率對應關係中獲取第二功率;發射器31還用於以第二功率朝待檢測物發射第二檢測信號;接收器32還用於接收穿過顯示螢幕後被待檢測物反射回的第二檢測信號以獲取待檢測物的深度訊息圖像。
需要說明的是,深度圖像獲取模組30中的記憶體(圖未示)預先儲存有距離-功率對應關係,距離-功率對應關係表徵了待檢測物與電子設備100在不同的距離下,與其對應的深度圖像獲取模組30發射第二檢測信號需要用到的最佳功率(第二功率)的大小。其中,距離與功率呈正相關,即,距離越遠,發射器31的功率越大。該距離-功率對應關係可以是電子設備100出廠時由廠商設置,是固定的,用戶在使用時無法更改。該距離-功率對應關係也可以是用戶自己設定,可以任意更改,在此不作限制。
例如,假設距離-功率對應關係記錄了第一距離對應的最佳功率的大小為第一預設值;第二距離對應的最佳功率的大小為第二預設值,其中第一距離小於第二距離,第一預設值小於第二預設值。當深度圖像獲取模組30獲取到待檢測物與電子設備100之間的距離為第一距離時,根據距離-功率對應關係中第一距離對應的最佳功率的大小為第一預設值,則深度圖像獲取模組30中的發射器31以功率大小為第一預設值發射第二檢測信號;當深度圖像獲取模組30獲取到待檢測物與電子設備100之間的距離為第二距離時,根據距離-功率對應關係中第二距離對應的最佳率的大小為第二預設值,則深度圖像獲取模組30中的發射器31以功率大小為第二預設發射第二檢測信號。
在一個例子中,第一功率小於第二功率。由於深度圖像獲取模組30先發射一個低功率(第一功率)的第一檢測信號判斷待檢測物與電子設備100之間的距離,再根據待檢測物與電子設備100之間的距離選用該距離下對應的最佳功率(第二功率)的大小來發射第二檢測信號,以獲得深度訊息圖像。一方面,避免了深度圖像獲取模組30長期發射大功率的檢測信號並使該信號穿過顯示螢幕10,可以降低發射器31發射的檢測信號對顯示螢幕10造成損壞,從而提高顯示螢幕10的壽命。另一方面,當設置在顯示螢幕10下方的深度圖像獲取模組30用於人臉識別的時候,根據待檢測物(人臉)與電子設備100之間的距離來調整第二檢測信號的第二功率大小,在實際距離大於與低功率對應的測試距離時,則第二功率可以調整為大於第一功率,如此可以避免深度圖像獲取模組30長期發射大功率的檢測信號並使該信號穿過顯示螢幕10射到人眼,從而保護人眼,保證人眼安全。在實際距離小於與低功率對應的測試距離時,則第二功率可以調整為小於第一功率,也能避免深度圖像獲取模組30長期發射大功率的檢測信號並使該信號穿過顯示螢幕10射到人眼,從而保護人眼,保證人眼安全。
需要說明的是,當待檢測物與電子設備100之間的距離很近的時候,第二功率可以等於第一功率。
請參閱圖7,控制方法還包括:
015:在發射第一檢測信號的同時,顯示螢幕10以第一刷新頻率顯示圖像,第一檢測信號的投射頻率與第一刷新頻率相同;及
016:在發射第二檢測信號的同時,顯示螢幕10以第二刷新頻率顯示圖像,第二檢測信號的投射頻率與第二刷新頻率相同,第一刷新頻率小於第二刷新頻率。
請參閱圖2及圖7,發射器31在發射第一檢測信號的同時,顯示螢幕10以第一刷新頻率顯示圖像,第一檢測信號的投射頻率與第一刷新頻率相同;發射器31在發射第二檢測信號的同時,顯示螢幕10以第二刷新頻率顯示圖像,第二檢測信號的投射頻率與第二刷新頻率相同,第一刷新頻率小於第二刷新頻率。
在一些實施例中,發射器31以第一功率朝待檢測物發射第一檢測信號,同時顯示螢幕10以第一刷新頻率顯示圖像,第一檢測信號的投射頻率與第一刷新頻率相同。接收器32接收穿過顯示螢幕10後被待檢測物反射回的第一檢測信號以獲取待檢測物與電子設備100的距離;電子設備100的處理器50還用於根據距離從預存的距離-功率對應關係中獲取第二功率。發射器31再以第二功率發射第二檢測信號,同時顯示螢幕10以第二刷新頻率顯示圖像,第二檢測信號的投射頻率與第二刷新頻率相同。並且第一刷新頻率小於第二刷新頻率,也即使是說,第一檢測信號的投射頻率小於第二檢測信號的投射頻率。一方面,由於用於檢測距離的第一檢測信號的投射頻率較小,對於顯示螢幕10的損壞能量較弱,從而延長顯示螢幕10的使用壽命;另一方面,由於用於獲取深度訊息圖像的第二檢測信號的投射頻率較大,獲取到待檢測物的深度圖像訊息也更詳細,從而提高深度訊息圖像的精確度。
在另一些實施例中,電子設備100中的記憶體(圖未示)還預先儲存有距離-投射頻率對應關係,距離-投射頻率對應關係表徵了待檢測物與電子設備100在不同的距離下,與其對應的深度圖像獲取模組30發射第二檢測信號需要用到的最佳投射頻率的大小。其中,距離與投射頻率也呈正相關,即,距離越遠,發射器31的投射頻率越大。該距離-投射頻率對應關係可以是電子設備100出廠時由廠商設置,是固定的,用戶在使用時無法更改。該距離-投射頻率對應關係也可以是用戶自己設定,可以任意更改,在此不作限制。
發射器31可根據待檢測物與電子設備100之間的距離選擇具有對應投射頻率及對應功率的第二檢測信號。待檢測物與電子設備100之間的距離越遠,第二檢測信號的投射頻率越大。在投射第二檢測信號的同時,顯示螢幕10具有第二刷新頻率,並且第二刷新頻率與第二檢測信號的投射頻率相同。也即是說,待檢測物與電子設備100之間的距離越遠,在發射第二檢測信號時顯示螢幕10的刷新頻率越大。具體地,發射器31以第一功率朝待檢測物發射第一檢測信號,同時顯示螢幕10以第一刷新頻率顯示圖像,第一檢測信號的投射頻率與第一刷新頻率相同。接收器32接收穿過顯示螢幕10後被待檢測物反射回的第一檢測信號以獲取待檢測物與電子設備100的距離;深度圖像獲取模組30還用於根據距離從預存的距離-功率對應關係中獲取第二功率的大小,再根據距離從預存的距離-頻率對應關係中獲取第二檢測信號的投射頻率的大小。發射器31根據獲取到的第二功率的大小及投射頻率的大小發射第二檢測信號,同時顯示螢幕10以第二刷新頻率顯示圖像,第二刷新頻率與第二檢測信號的投射頻率相同。
在一些實施例中,在距離-功率對應關係中,可以是一個距離值對應一個功率值,可以是一個距離值對應一個功率範圍,也可以是一個距離範圍對應一個功率值,還可以是一個距離範圍對應一個功率範圍。當透過低功率的第一檢測信號檢測出待檢測物與電子設備100之間的距離後,若透過查表法,在距離-功率對應關係中,查出與該檢測出的距離對應的功率為多個,那麼可從中任選一個功率作為第二檢測信號的第二功率。同樣地,在距離-投射頻率對應關係中,可以是一個距離值對應一個投射頻率值,可以是一個距離值對應一個投射頻率範圍,也可以是一個距離範圍對應一個投射頻率值,還可以是一個距離範圍對應一個投射頻率範圍。當透過低功率的第一檢測信號檢測出待檢測物與電子設備100之間的距離後,若透過查表法,在距離-投射頻率對應關係中,查出與該檢測出的距離對應的投射頻率為多個,那麼可從中任選一個投射頻率作為第二檢測信號的投射頻率。
需要說明的是,一個例子中,第一檢測信號的第一功率可以等於第二檢測信號的第二功率,但第一檢測信號的投射頻率可以小於第二檢測信號的投射頻率。一方面,由於用於檢測距離的第一檢測信號的投射頻率較小,對於顯示螢幕10的損壞能量較弱,從而延長顯示螢幕10的使用壽命;另一方面,由於用於獲取深度訊息圖像的第二檢測信號的投射頻率較大,獲取到待檢測物的深度圖像訊息也更詳細,從而提高深度訊息圖像的精確度。
在一個例子中,第一檢測信號的投射頻率可以等於第二檢測信號的投射頻率,但第一檢測信號的第一功率小於第二檢測信號的第二功率。一方面,由於用於檢測距離的第一檢測信號的功率較小,對於顯示螢幕10的損壞能量較弱,從而延長顯示螢幕10的使用壽命;另一方面,由於用於獲取深度訊息圖像的第二檢測信號的功率較大,獲取到待檢測物的深度圖像訊息也更詳細,從而提高深度訊息圖像的精確度。
在又一個例子中,第一檢測信號的第一功率小於第二檢測信號的第二功率,第一檢測信號的投射頻率也小於第二檢測信號的投射頻率。一方面,由於用於檢測距離的第一檢測信號的能量(包括功率及投射頻率)較小,對於顯示螢幕10的損壞能量較弱,從而延長顯示螢幕10的使用壽命;另一方面,由於用於獲取深度訊息圖像的第二檢測信號的能量(包括功率及投射頻率)較大,獲取到待檢測物的深度圖像訊息也更詳細,從而提高深度訊息圖像的精確度。
請參閱圖5,在一些實施例中,控制方法還包括:
02:獲取待檢測物的二維圖像訊息;及
03:在二維圖像訊息中存在人臉時,則啟動深度圖像獲取模組30。
請參閱圖1、圖2及圖5,電子設備100還包括攝影模組40。攝影模組40收容在顯示螢幕10與殼體20形成的收容腔內。攝影模組40可以是可見光攝影機,也可以是紅外光攝影機。當攝影模組40是可見光攝影機時,攝影模組40獲取到待檢測物的二維圖像訊息為RGB圖像;當攝影模組40是紅外光攝影機時,攝影模組40獲取到待檢測物的二維圖像為紅外圖像。在本申請的實施例中,攝影模組40為可見光攝影機。
可以理解地,當設置在顯示螢幕10下的深度圖像獲取模組30用於人臉解鎖時,只有識別到二維訊息中存在人臉,才需要開啟深度圖像獲取模組30以獲取人臉的深度訊息圖像進行解鎖;若二維訊息中不存在人臉,則不需要。由於先利用攝影模組40判斷待檢測物中是否含有人臉,存在人臉才開啟深度圖像獲取模組30,大大減少了發射器31發射的檢測信號穿過顯示螢幕10的次數,從而既減少了螢幕閃爍,又降低了發射器31發射的檢測信號對顯示螢幕10造成的損壞,提高顯示螢幕10壽命。
需要說明的是,開啟深度圖像獲取模組30並不是指立即驅動發射器31發射檢測信號,而是當檢測到待檢測物的二維圖像訊息中存在人臉後,深度圖像獲取模組30已經上電,發射器31做好發射光線的準備,只有在顯示螢幕10第一次顯示圖像的同時,發射器31才正式朝顯示螢幕10外發射檢測信號。
請參閱圖5,在一些實施例中,控制方法還包括:
04:比對深度訊息圖像與預設深度圖像;
05:在深度訊息圖像與預設圖像的相似度大於預定值時,解鎖電子設備100。
請參閱圖2及圖5,電子設備100還包括處理器50。步驟04及步驟05均可由處理器50執行。也即是說,處理器50用於比對深度訊息圖像與預設深度圖像,及在深度訊息圖像與預設圖像的相似度大於預定值時,解鎖電子設備100。
具體地,將獲得的深度訊息圖像與預設深度圖像分別進行人臉特徵提取,以獲得與預設深度圖像對應的第一特徵圖像及與深度訊息圖像對應的第二特徵圖像;對第一特徵圖像中的各個特徵與第二特徵圖像中的各個特徵進行分類,並分別進行向量化表示。獲得與預設深度圖像對應的第一特徵圖像中的特徵向量及與待深度訊息圖像對應的第二特徵圖像的特徵向量後,計算每一張第一特徵圖像中的每個類別的特徵向量與第二特徵圖像中對應類別的特徵向量之間的差距。例如,選取第一特徵圖像中表示眼睛寬度的特徵向量與第二特徵圖像中表示眼睛寬度的特徵向量,計算這兩個向量之間的差距;或選取第一特徵圖像中表示鼻樑高度的特徵向量與第二特徵圖像中表示鼻樑高度的特徵向量,計算這兩個向量之間的差距。
根據多個類別對應的多個差距計算出深度訊息圖像與預設深度圖像之間的綜合差距,並用綜合差距來表示相似度。在一些實施例中,可利用歐氏距離計算綜合差距並且用歐氏距離值表示相似度,例如,特徵向量的類別包括眼睛、鼻子、嘴巴、耳朵,並且第一特徵圖像中表示眼睛的特徵向量為A、第二特徵圖像中表示眼睛的特徵向量為A0;第一特徵圖像中表示鼻子的特徵向量為B、第二特徵圖像中表示鼻子的特徵向量為B0;第一特徵圖像中表示嘴巴的特徵向量為C、第二特徵圖像中表示嘴巴的特徵向量為C0;第一特徵圖像表示耳朵的特徵向量為D、第二特徵圖像中表示耳朵的特徵向量為D0,則根據歐氏距離計算綜合差距L為第一特徵圖像與第二特徵圖像上相同類別特徵向量之間差值的平方和的算術平方根,即用數學公式表達為:
Figure 02_image001
。用計算獲得的L值表示深度訊息圖像中人臉與預設深度圖像中人臉的相似度,計算的歐氏距離值越小表示綜合差距越小,即該深度訊息圖像中的人臉與預設深度圖像中人臉越相似,即相似度越高。當深度訊息圖像中的人臉與預設深度圖像中的人臉之間的相似度大於預定值時,即可認為此時使用電子設備100的使用者是該電子設備100的授權使用者,則可解鎖電子設備100。
請一併參閱圖8,本申請還提供一種電腦可讀儲存媒介200,其上儲存有電腦程式210,程式被處理器50執行的情況下,實現上述任意一種實施方式的控制方法的步驟。
例如,請參閱圖6及圖8,程式被處理器50執行的情況下,實現以下控制方法的步驟:
011:以第一功率朝待檢測物發射第一檢測信號;
012:接收穿過顯示螢幕10後被待檢測物反射回的第一檢測信號以獲取待檢測物與電子設備100之間的距離;根據距離從預存的距離-功率對應關係中獲取第二功率;
013:以第二功率朝待檢測物發射第二檢測信號;
014:接收穿過顯示螢幕後被待檢測物反射回的第二檢測信號以獲取待檢測物的深度訊息圖像。
再例如,請參閱圖2及圖8,程式被處理器50執行的情況下,實現以下控制方法的步驟:
02:獲取待檢測物的二維圖像訊息;及
03:在二維圖像訊息中存在人臉時,則啟動深度圖像獲取模組30。
電腦可讀儲存媒介200可設置在電子設備100內,也可設置在雲端伺服器內,此時,電子設備100能夠與雲端伺服器進行通訊來獲取到相應的電腦程式210。
可以理解,電腦程式210包括電腦程式代碼。電腦程式代碼可以為原始程式碼形式、物件代碼形式、可執行檔或某些中間形式等。電腦可讀儲存媒介可以包括:能夠攜帶電腦程式代碼的任何實體或裝置、記錄媒介、隨身碟、行動硬碟、磁碟、光碟、電腦記憶體、唯讀記憶體(ROM,Read-Only Memory)、隨機存取記憶體(RAM,Random Access Memory)、以及軟體分發媒介等。
處理器50可以是指驅動板。驅動板可以是中央處理單元(Central Processing Unit,CPU),還可以是其他通用處理器50、數位訊號處理器230(Digital Signal Processor,DSP)、專用積體電路(Application Specific Integrated Circuit,ASIC)、場域可程式閘陣列(Field- Programmable Gate Array,FPGA)或者其他可程式邏輯裝置、離散閘或者電晶體邏輯裝置、離散硬體元件等。
在本說明書的描述中,參考術語“一個實施方式”、“一些實施方式”、“示意性實施方式”、“示例”、“具體示例”或“一些示例”等的描述意指結合所述實施方式或示例描述的具體特徵、結構、材料或者特點包含於本申請的至少一個實施方式或示例中。在本說明書中,對上述術語的示意性表述不一定指的是相同的實施方式或示例。而且,描述的具體特徵、結構、材料或者特點可以在任何的一個或多個實施方式或示例中以合適的方式結合。此外,在不相互矛盾的情況下,本領域的技術人員可以將本說明書中描述的不同實施例或示例以及不同實施例或示例的特徵進行結合和組合。
流程圖中或在此以其他方式描述的任何過程或方法描述可以被理解為,表示包括一個或更多個用於實現特定邏輯功能或過程的步驟的可執行指令的代碼的模組、片段或部分,並且本申請的優選實施方式的範圍包括另外的實現,其中可以不按所示出或討論的順序,包括根據所涉及的功能按基本同時的方式或按相反的順序,來執行功能,這應被本申請的實施例所屬技術領域的技術人員所理解。
儘管上面已經示出和描述了本申請的實施方式,可以理解的是,上述實施方式是示例性的,不能理解為對本申請的限制,本領域的普通技術人員在本申請的範圍內可以對上述實施方式進行變化、修改、替換和變型。
10:顯示螢幕 11:第一基板 12:連接層 13:第二基板 133:通孔 20:殼體 21:第一面 22:第二面 23:收容空間 30:深度圖像獲取模組 31:發射器 32:接收器 40:攝影模組 50:處理器 100:電子設備 200:電腦可讀儲存媒介 210:電腦程式 T0~T2:時刻 01~05:步驟 011~016:步驟
本申請的上述和/或附加的方面和優點可以從結合下面附圖對實施方式的描述中將變得明顯和容易理解,其中:
圖1是本申請某些實施方式的電子設備的立體結構示意圖;
圖2是本申請某些實施方式的電子設備的分解示意圖;
圖3是圖2的電子設備沿III-III線的部分截面示意圖;
圖4是本申請某些實施方式的顯示螢幕的刷新頻率與發射器發射檢測信號的發射頻率的示意圖;
圖5是本申請某些實施方式的控制方法的流程示意圖;
圖6是本申請某些實施方式的控制方法的流程示意圖;
圖7是本申請某些實施方式的控制方法的流程示意圖;
圖8是本申請某些實施方式的電腦可讀儲存媒介與處理器的交互示意圖。
01~05:步驟

Claims (10)

  1. 一種用於電子設備的控制方法,所述電子設備包括深度圖像獲取模組、殼體及顯示螢幕,所述深度圖像獲取模組設置在所述殼體內並位於所述顯示螢幕的下方,所述深度圖像獲取模組包括發射器及接收器;所述控制方法包括:在所述顯示螢幕刷新的同時,所述發射器向所述顯示螢幕方向發射檢測信號,所述接收器接收穿過所述顯示螢幕後經待檢測物反射後的所述檢測信號,以獲得所述待檢測物的深度訊息圖像;其中,所述顯示螢幕的刷新頻率與所述發射器的投射頻率相同,其中,所述在所述顯示螢幕刷新的同時,所述發射器向所述顯示螢幕方向發射檢測信號,所述接收器接收穿過所述顯示螢幕後被待檢測物反射回的所述檢測信號以獲得所述待檢測物的深度訊息圖像包括:以第一功率朝所述待檢測物發射第一檢測信號;接收穿過所述顯示螢幕後被所述待檢測物反射回的所述第一檢測信號以獲取所述待檢測物與所述電子設備的距離;根據所述距離從預存的距離-功率對應關係中獲取第二功率;以第二功率朝所述待檢測物發射所述第二檢測信號;接收穿過所述顯示螢幕後被所述待檢測物反射回的所述第二檢測信號以獲取待檢測物的深度訊息圖像。
  2. 根據請求項1所述的控制方法,所述控制方法包括:在發射所述第一檢測信號的同時,所述顯示螢幕以第一刷新頻率顯示圖像,所述第一檢測信號的投射頻率與所述第一刷新頻率相同; 在發射所述第二檢測信號的同時,所述顯示螢幕以第二刷新頻率顯示圖像,第二檢測信號的投射頻率與所述第二刷新頻率相同,所述第一刷新頻率小於所述第二刷新頻率。
  3. 根據請求項1或2所述的控制方法,所述控制方法包括:獲取所述待檢測物的二維圖像訊息;及在所述二維圖像訊息中存在人臉時,則啟動所述深度圖像獲取模組。
  4. 根據請求項3所述的控制方法,所述控制方法包括:比對所述深度訊息圖像與預設深度圖像;在所述深度訊息圖像與所述預設圖像的相似度大於預定值時,解鎖所述電子設備。
  5. 一種電子設備,所述電子設備包括:殼體;顯示螢幕,所述顯示螢幕設置在所述殼體上;及深度圖像獲取模組,所述深度圖像獲取模組設置在所述殼體內並位於所述顯示螢幕的下方,所述深度圖像獲取模組包括發射器及接收器;在所述顯示螢幕顯示圖像的同時,所述發射器向所述顯示螢幕方向發射檢測信號,所述接收器接收穿過所述顯示螢幕後被待檢測物反射回的所述檢測信號以獲得所述待檢測物的深度訊息圖像;其中,所述顯示螢幕的刷新頻率與所述發射器的投射頻率相同,其中,所述發射器用於以第一功率朝所述待檢測物發射第一檢測信號;所述接收器用於接收穿過所述顯示螢幕後被所述待檢測物反射回的所述第一檢測信號以獲取所述待檢測物與所述電子設備的距離;所述發射器還用於以第二功率朝所述待檢測物發射所述第二檢測信號,所述第二功率是根據所述距離從預存的距離-功率對應關係獲取的; 所述接收器接收穿過所述顯示螢幕後被所述待檢測物反射回的所述第二檢測信號以獲取待檢測物的深度訊息圖像。
  6. 根據請求項5所示的電子設備,其中,所述發射器在發射所述第一檢測信號的同時,所述顯示螢幕以第一刷新頻率顯示圖像,所述第一檢測信號的投射頻率與所述第一刷新頻率相同;所述發射器在發射所述第二檢測信號的同時,所述顯示螢幕以第二刷新頻率顯示圖像,所述第二檢測信號的投射頻率與所述第二刷新頻率相同,所述第一刷新頻率小於所述第二刷新頻率。
  7. 根據請求項5或6所述的電子設備,所述電子設備還包括:攝影模組,所述攝影模組用於獲取待檢測物的二維圖像訊息;其中:在所述二維圖像訊息中存在人臉時,所述深度圖像獲取模組啟動。
  8. 根據請求項7所述的電子設備,所述電子設備還包括:處理器,所述處理器用於比對所述深度訊息圖像與預設深度圖像;其中:在所述深度訊息圖像與所述預設圖像的相似度大於預定值時,所述電子設備解鎖。
  9. 根據請求項5所述的電子設備,其中,所述顯示螢幕包括:第一基板;第二基板,所述第二基板設置在所述第一基板的一側,所述第二基板上開設有至少一個通孔,所述深度圖像獲取模組設置在所述通孔中;及連接層,所述連接層用於連接所述第一基板及所述第二基板,所述連接層的折射率與所述通孔內空氣的折射率之前的差值在預定範圍內。
  10. 一種包含電腦程式的非揮發性電腦可讀儲存媒介,所述電腦程式被處理器執行時,使得所述處理器執行請求項1至4任意一項所述的控制方法。
TW110112946A 2020-04-29 2021-04-09 控制方法、電子設備及電腦可讀儲存媒介 TWI791208B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202010353593.5 2020-04-29
CN202010353593.5A CN111461069B (zh) 2020-04-29 2020-04-29 控制方法、电子设备及计算机可读存储介质

Publications (2)

Publication Number Publication Date
TW202141972A TW202141972A (zh) 2021-11-01
TWI791208B true TWI791208B (zh) 2023-02-01

Family

ID=71683050

Family Applications (1)

Application Number Title Priority Date Filing Date
TW110112946A TWI791208B (zh) 2020-04-29 2021-04-09 控制方法、電子設備及電腦可讀儲存媒介

Country Status (3)

Country Link
CN (1) CN111461069B (zh)
TW (1) TWI791208B (zh)
WO (1) WO2021218374A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111461069B (zh) * 2020-04-29 2023-05-30 Oppo广东移动通信有限公司 控制方法、电子设备及计算机可读存储介质
CN114333661B (zh) * 2022-01-05 2024-07-05 苏州华兴源创科技股份有限公司 显示面板工业检测方法、系统、计算机设备及存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109840475A (zh) * 2018-12-28 2019-06-04 深圳奥比中光科技有限公司 人脸识别方法及电子设备
CN209170443U (zh) * 2018-12-28 2019-07-26 深圳奥比中光科技有限公司 电子设备

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140085245A1 (en) * 2012-09-21 2014-03-27 Amazon Technologies, Inc. Display integrated camera array
CN105451011B (zh) * 2014-08-20 2018-11-09 联想(北京)有限公司 调节功率的方法和装置
CN106850989B (zh) * 2017-02-08 2019-08-06 Oppo广东移动通信有限公司 显示屏状态控制方法及装置
CN107748869B (zh) * 2017-10-26 2021-01-22 奥比中光科技集团股份有限公司 3d人脸身份认证方法与装置
CN108803917A (zh) * 2018-03-28 2018-11-13 广东欧珀移动通信有限公司 控制方法、控制装置、电子装置、计算机存储介质及设备
CN108615012A (zh) * 2018-04-27 2018-10-02 Oppo广东移动通信有限公司 距离提醒方法、电子装置和非易失性计算机可读存储介质
CN109167904B (zh) * 2018-10-31 2020-04-28 Oppo广东移动通信有限公司 图像获取方法、图像获取装置、结构光组件及电子装置
CN110134034A (zh) * 2019-03-26 2019-08-16 华为技术有限公司 一种光传感器状态控制方法及电子设备
CN111461069B (zh) * 2020-04-29 2023-05-30 Oppo广东移动通信有限公司 控制方法、电子设备及计算机可读存储介质

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109840475A (zh) * 2018-12-28 2019-06-04 深圳奥比中光科技有限公司 人脸识别方法及电子设备
CN209170443U (zh) * 2018-12-28 2019-07-26 深圳奥比中光科技有限公司 电子设备

Also Published As

Publication number Publication date
WO2021218374A1 (zh) 2021-11-04
TW202141972A (zh) 2021-11-01
CN111461069B (zh) 2023-05-30
CN111461069A (zh) 2020-07-28

Similar Documents

Publication Publication Date Title
TWI791208B (zh) 控制方法、電子設備及電腦可讀儲存媒介
US11042034B2 (en) Head mounted display calibration using portable docking station with calibration target
US10529074B2 (en) Camera pose and plane estimation using active markers and a dynamic vision sensor
US9866748B2 (en) System and method for controlling a camera based on processing an image captured by other camera
WO2020088296A1 (zh) 一种人脸识别方法及电子设备
CN108664783B (zh) 基于虹膜识别的识别方法和支持该方法的电子设备
EP3191888B1 (en) Scanning laser planarity detection
US11335028B2 (en) Control method based on facial image, related control device, terminal and computer device
WO2021077989A1 (zh) 推荐方法、装置、计算机设备及存储介质
CN109151301A (zh) 包括相机模块的电子装置
WO2020038062A1 (zh) 控制方法及装置、深度相机、电子装置及可读存储介质
US20220086268A1 (en) Controlling Method for Electronic Device and Electronic Device
WO2020052284A1 (zh) 控制方法及装置、深度相机、电子装置及可读存储介质
US20210409678A1 (en) Rolling shutter camera pipeline exposure timestamp error determination
WO2018113759A1 (zh) 基于定位系统和ar/mr的探测系统及探测方法
CN112005548A (zh) 生成深度信息的方法和支持该方法的电子设备
EP2911088A2 (en) Method and apparatus for displaying biometric information
TWI702823B (zh) 立體視覺處理方法和裝置
WO2020062848A1 (zh) 一种人脸识别方法、光心标定方法和终端
CN109725719A (zh) 设备控制方法、装置及电子设备、存储介质
US20240129617A1 (en) Image capture eyewear with context-based sending
WO2020087486A1 (zh) 深度图像处理方法、深度图像处理装置和电子装置
WO2018161759A1 (zh) 逆光图像处理方法、逆光图像处理装置及电子装置
US12111463B2 (en) Head-mounted display apparatus and operating method thereof
TWI853329B (zh) 具有立體影像處理功能的立體影像感測裝置及應用於其上之立體影像處理方法