TWI758837B

TWI758837B - 展示對象的控制方法與裝置、電子設備及記錄媒體

Info

Publication number: TWI758837B
Application number: TW109129463A
Authority: TW
Inventors: 孫賀然
Original assignee: 大陸商北京市商湯科技開發有限公司
Priority date: 2019-11-28
Filing date: 2020-08-28
Publication date: 2022-03-21
Also published as: KR20210075188A; WO2021103610A1; CN110968239A; TW202121250A; JP2022515317A; CN110968239B

Abstract

本發明提供了一種展示對象的控制方法與裝置、電子設備及記錄媒體。該方法包括：在顯示螢幕中展示獲取的影片畫面；在檢測到所述影片畫面中包括目標對象的情況下，在所述顯示螢幕中展示與所述目標對象關聯的展示對象；基於對所述影片畫面中所述目標對象的累計檢測結果，控制所述顯示螢幕中的所述展示對象變換展示狀態。

Description

展示對象的控制方法與裝置、電子設備及記錄媒體

本發明涉及電腦技術領域，具體而言，涉及一種展示對象的控制方法與裝置、電子設備及記錄媒體。 [相關申請的交叉引用]

本發明要求於2019年11月28日提交的、申請號為201911190043.X、發明名稱為“一種展示對象的控制方法、裝置、設備及存儲介質”的中國專利申請的優先權，該中國專利申請公開的全部內容以引用的方式併入本文中。

在一些場所或區域舉辦活動的情況下，通常會對到場人員的資訊進行統計。對於到場人員的資訊統計往往會由專門的工作人員進行人工統計，比如在簽到表上簽字、錄入身份資訊等，操作繁瑣且操作過程單一化，不利於與到場人員的互動。

有鑒於此，本發明至少提供一種展示對象的控制的方案。

第一方面，本發明提供了一種展示對象的控制方法，包括：在顯示螢幕中展示獲取的影片畫面；在檢測到所述影片畫面中包括目標對象的情況下，在所述顯示螢幕中展示與所述目標對象關聯的展示對象；基於對所述影片畫面中所述目標對象的累計檢測結果，控制所述顯示螢幕中的所述展示對象變換展示狀態。

上述提供了一種對於目標對象的自動檢測方案，可以基於顯示螢幕中展示的影片畫面，檢測影片畫面中是否包括目標對象，並在檢測到影片畫面中包括目標對象的情況下，展示與目標對象關聯的展示對象，並基於對影片畫面中目標對象的累計檢測結果，控制展示對象變換展示狀態。隨著目標對象改變狀態資訊（如做手勢、微笑等），累計檢測結果也可以相應地改變，進而可以控制展示對象變換展示狀態，從而能夠豐富展示效果，增強與目標對象之間的互動。

第二方面，本發明提供了一種展示對象的控制裝置，包括：第一展示模組，用於在顯示螢幕中展示獲取的影片畫面；第二展示模組，用於在檢測到所述影片畫面中包括目標對象的情況下，在所述顯示螢幕中展示與所述目標對象關聯的展示對象；控制模組，用於基於對所述影片畫面中所述目標對象的累計檢測結果，控制所述顯示螢幕中的所述展示對象變換展示狀態。

第三方面，本發明提供一種電子設備，包括：處理器；和記憶體，其中所述記憶體儲存有所述處理器可執行的電腦可讀指令，所述電腦可讀指令被所述處理器執行時，使所述處理器實現上述第一方面所述的展示對象的控制方法。

第四方面，本發明提供一種電腦可讀取記錄媒體，該電腦可讀取記錄媒體上儲存有電腦程式，其中，該電腦程式被處理器運行時，使所述處理器實現上述第一方面所述的展示對象的控制方法。

為使本發明的上述目的、特徵和優點能更明顯易懂，下文特舉較佳實施例，並配合所附附圖作詳細說明。

為使本發明實施例的目的和優點更加清楚，下面將結合附圖，對本發明的實施例進行清楚、完整地描述。顯然，所描述的實施例僅僅是本發明一部分實施例，而不是全部的實施例。通常在此處附圖中描述和示出的本發明實施例的組件可以以各種不同的配置來布置和設計。因此，以下對在附圖中提供的本發明的實施例的詳細描述並非旨在限制要求保護的本發明的範圍，而是僅僅表示本發明的選定實施例。基於本發明的實施例，本領域技術人員在沒有做出創造性勞動的前提下所獲得的所有其他實施例，都屬於本發明保護的範圍。

在本發明使用的術語是僅僅出於描述特定實施例的目的，而非旨在限制本發明。在本發明中所使用的單數形式諸如“一種”、“所述”、“該”等也旨在包括複數形式，除非上下文清楚地表示其他含義。還應當理解，本文中使用的術語“和/或”是指並包含一個或多個相關聯的列出項目中的任何一個或其所有可能組合。

應當理解，儘管本發明可能採用術語第一、第二、第三等來描述各種資訊，但這些資訊不應受這些術語限制。這些術語僅用來將同一類型的資訊彼此區分開。例如，在不脫離本發明範圍的情況下，第一資訊也可以被稱為第二資訊，類似地，第二資訊也可以被稱為第一資訊。取決於語境，如在此所使用的詞語“如果”可以被解釋成為“在……時”或“當……時”或“響應於”。

首先對本發明實施例所適用的應用場景展開介紹。本發明可以適用於具有資料處理能力的電子設備，電子設備可以配置有用於顯示資料處理結果的顯示裝置，也可以外接用於顯示資料處理結果的顯示裝置，其連接方法不限於有線連接、和/或無線連接。電子設備還可以與至少一個攝像裝置連接，其連接方式不限於有線連接、和/或無線連接。電子設備和與其連接的攝像裝置可以部署在同一位置區域中，攝像裝置在拍攝影片畫面之後，傳輸到電子設備進行處理，電子設備在處理完成之後，可以通過電子設備配置的顯示裝置或者電子設備外接的顯示裝置（如顯示螢幕）進行顯示。其中，電子設備例如可以是手機、平板電腦、智慧電視、電腦等。

在一些實施例中，目標對象可以是出現在影片畫面中的所有或部分用戶，也可以是出現在影片畫面中符合某種設定屬性的用戶，或者預先設置的特定對象。可以根據應用場景的不同確定不同的目標對象。

在一些實施例中，累計檢測結果為在不同時刻下對目標對象的某種屬性或者目標對象做出的某種姿態的檢測結果的累計值。具體屬性或者姿態可以根據應用場景的不同進行設置，且檢測結果也不限定於以上兩種情況。

為便於對本發明實施例進行理解，首先對本發明提供的展示對象的控制方法進行詳細介紹。

參見圖1所示，本發明實施例所提供的一種展示對象的控制方法包括步驟S101~S103。

步驟S101、在顯示螢幕中展示獲取的影片畫面。

其中，顯示螢幕中展示的影片畫面可以是通過攝像裝置即時拍攝獲取的，攝像裝置可以是電子設備內置的攝像頭，也可以是外接的攝像裝置。若攝像裝置為電子設備外接的裝置，則攝像裝置可以與顯示螢幕部署在同一位置區域內，例如可以部署在同一展會，或者部署在同一房間內。考慮到顯示螢幕中展示的是攝像裝置拍攝的影片畫面，為了使用戶能夠更方便的觀看到自己的姿態（如面部姿態和/或身體姿態），攝像裝置可以與顯示螢幕放置在同一垂直平面上。或者，可以將用戶觀看顯示螢幕時，能夠拍攝到用戶完整姿態的位置作為攝像裝置的部署位置。

步驟S102、在檢測到影片畫面中包括目標對象的情況下，在顯示螢幕中展示與目標對象關聯的展示對象。

與目標對象關聯的展示對象可以有多個，不同的目標對象可以關聯不同的展示對象，具體將在下面的實施例中詳細介紹，在此暫不展開說明。

步驟S103、基於對影片畫面中目標對象的累計檢測結果，控制顯示螢幕中的展示對象變換展示狀態。

本發明實施例中可以基於顯示螢幕中展示的影片畫面，檢測影片畫面中是否包括目標對象，並在檢測到影片畫面中包括目標對象的情況下，展示與目標對象關聯的展示對象，並基於對影片畫面中目標對象的累計檢測結果，控制展示對象變換展示狀態。隨著目標對象改變狀態資訊（如做手勢、微笑等），累計檢測結果也可以相應地改變，進而可以控制展示對象變換展示狀態，從而能夠豐富展示效果，增強與目標對象之間的互動。

步驟S102中所述目標對象可以是出現在影像擷取範圍內的全部對象，也可以是在影像擷取範圍內能夠獲取到完整人臉的部分對象，或者可以是在影像擷取範圍內符合預設屬性特徵的對象。其中，預設屬性特徵例如可以如性別、頭髮長度、衣服顏色等。若目標對象是符合預設屬性特徵的對象，則在獲取到影片畫面之後，可以先識別影片畫面中每一個對象的屬性特徵，然後將符合預設屬性特徵的對象確定為目標對象。

在另外一種可能的實施方式中，目標對象還可以是特定對象（可以為一個或多個），這裡特定對象比如可以是預定參加展會的某人物。在目標對象是特定對象的情況下，可以預先儲存特定對象的生物特徵，例如可以為面部特徵、步態特徵、行人重識別（Person Re-identification，REID）特徵等。檢測影片畫面中是否包括目標對象可以包括：檢測影片畫面中每一個對象的生物特徵，將檢測出的生物特徵與預先儲存的特定對象的生物特徵進行匹配，將匹配成功的對象確定為目標對象。

在一種可能的實施方式中，在檢測到影片畫面中包括目標對象的情況下，展示與目標對象關聯的展示對象可以包括以下6種情況中的一種或幾種。

情況1：在檢測到影片畫面中包括目標對象的情況下，可以在顯示螢幕的第一顯示區域展示初始展示狀態的第一展示對象，其中，初始展示狀態用於提示目標對象做出目標姿態。

目標姿態包括但不限於姿勢和表情神態，比如舉手姿勢、微笑表情等。

其中，在顯示螢幕的第一顯示區域還可以展示有獲取的影片畫面，在展示初始展示狀態的第一展示對象時，可以先檢測出影片畫面中每個目標對象的關鍵點，然後基於關鍵點的位置，在第一顯示區域展示初始展示狀態的第一展示對象。

示例性的，圖2為第一顯示區域的界面示意圖，如圖2所示，第一顯示區域中展示有攝像裝置拍攝的影片畫面，影片畫面中包括多個目標對象，每個目標對象的頭部位置展示有花朵特效。展示的花朵為初始展示狀態的第一展示對象，花朵周圍有提示語“微笑成為VIP”，用於提醒用戶微笑（微笑即為目標姿態）；在另外一示例中，在展示花朵周圍的提示語之後，還可以對提示語進行語音播報，以對目標對象進行語音提示。

本發明的一些實施例中還可以應用於課堂場景中，第一顯示區域中可以展示有攝像裝置即時拍攝的課堂畫面，拍攝的課堂畫面中的每一個學生都是目標對象。在每一個學生的頭部位置可以展示有手掌特效，手掌特效為第一展示對象。初始展示狀態下的手掌特效可以是虛線邊框的手掌，手掌周圍有提示語“舉手提問”，用於提示學生進行舉手互動。在一種可能的示例中，在手掌周圍展示提示語之後，還可以對展示的提示語進行語音播報，以對學生進行語音提示。

具體實施中，基於對影片畫面中目標對象的累計檢測結果，控制顯示螢幕中的展示對象變換展示狀態可以包括：檢測影片畫面中目標對象做出的目標姿態，基於目標對象做出目標姿態的累計時長或累計次數，控制第一顯示區域中的第一展示對象變換展示狀態。

在一種可能的實施方式中，所述基於目標對象做出目標姿態的累計時長或累計次數，控制第一顯示區域中的第一展示對象變換展示狀態可以包括：在累計時長或累計次數未達到設定值的情況下，控制第一展示對象將展示狀態變換為中間展示狀態；其中，中間展示狀態隨累計時長或累計次數的累計值變化，以指示該累計值。

如圖2所示，若初始展示狀態的第一展示對象為花朵特效，則在控制第一顯示區域中的第一展示對象變換展示狀態時，可以根據目標用戶的微笑時長改變花朵的顏色，或者點亮花朵下方的進度條內的方塊。例如，若進度條內的一塊方塊表示微笑2秒鐘，當目標對象微笑時間為10秒鐘時，從下往上點亮花朵下方的進度條內5塊方塊。另外，還可以根據點亮的方塊的數量，改變方塊的顏色。例如，當只有5塊方塊被點亮時，方塊顏色可以呈現藍色；隨著被點亮的方塊的數量增多，方塊的顏色可以漸變；當全部方塊被點亮時，方塊可以呈現為紅色。

如圖3所示，在課堂的應用場景中，可以檢測學生（即目標對象）的舉手次數，並根據學生的舉手次數，改變展示的手掌特效。若學生的舉手次數為4次，則可以點亮手掌特效，並在該手掌特效後邊添加“x4”的標誌。若學生第一次舉手，則可以只在頭頂位置展示一個手掌特效，並在展示的手掌特效後邊添加“x1”的標誌。

在另外一種可能的實施方式中，所述基於目標對象做出目標姿態的累計時長或累計次數，控制第一顯示區域中的第一展示對象進行展示狀態的變換可以包括：在累計時長或累計次數達到設定值的情況下，控制第一展示對象將展示狀態變換為目標展示狀態以指示目標對象做出的目標姿態已符合設定條件。

在上述課堂的應用場景中，當檢測到學生舉手次數達到設定次數時，第一展示對象除了包括手掌特效外，還可以包括星星特效；第一展示對象的目標展示狀態例如可以為星星特效的五顆星星依次點亮，用於指示學生舉手次數達到設定次數；同時手掌特效後添加用於表示舉手次數的標誌。

在情況1中，通過展示初始展示狀態的第一展示對象，可以提示目標對象做出目標姿態，從而增加與目標對象之間的互動，通過控制第一展示對象變換展示狀態，為第一展示對象提供了更多的展示方式。

情況2：在檢測到影片畫面中包括目標對象的情況下，可以檢測影片畫面中目標對象的屬性特徵，在顯示螢幕的第一顯示區域中展示與屬性特徵對應的第二展示對象。

其中，第二展示對象包括以下資訊中的至少一種：目標對象的身份標識、年齡值、微笑值、魅力值、觀看時長、不同種情緒的時長、關注時長。在不同的應用場景中，與屬性特徵對應的第二展示對象的類型可能不同，具體可以根據實際情況設置。

示例性的，當本發明的一些實施例中應用於課堂場景中時，目標對象可以是教室中的學生，則對應的第二展示對象可以包括以下資訊中的至少一種：上課時長、關注時長、正向情緒時長、負向情緒時長。其中，正向情緒例如可以為高興、興奮、激動等，負向情緒例如可以為害怕、悲傷等；上課時長可以是電子設備開始獲取到攝像裝置拍攝到的影片畫面到當前時刻之間的時長；關注時長可以是攝像裝置可以擷取到學生的完整面部特徵的時長。在一些實施例中，可以通過如下方式確定關注時長：通過檢測每一幀影片畫面中學生的頭部位置，確定學生的頭部位置與預設位置（例如可以為黑板）之間的偏移角度；當偏移角度在預設角度範圍內時，確定學生此刻在關注黑板；通過統計學生在關注黑板的影片幀的個數，確定關注時長。

在一些實施例中，可以通過如下方式檢測學生的正向情緒時長以及負向情緒時長：將拍攝的影片畫面輸入至預先訓練好的情緒識別模型中以預測影片畫面中的每一個學生所對應的情緒；基於預測出的情緒確定該情緒屬於正向情緒還是負向情緒；統計截止到當前時刻為止，學生的情緒屬於正向情緒的影片畫面的時長，以及學生的情緒屬於負向情緒的影片畫面的時長；分別基於出現每種情緒的影片畫面的時長，確定每一個學生對應的正向情緒時長以及負向情緒時長。

本發明的一些實施例還可以應用於展會或商場等公共場所，此時第二展示對象可以包括身份標識、年齡、魅力值、觀看時長、表情、微笑值中的一種或多種。

其中，目標對象的屬性特徵可以是目標對象的生物特徵（如面部特徵、步態特徵、REID特徵等）。示例性的，可以先提取影片畫面中目標對象的生物特徵，然後將提取的生物特徵與資料庫中預先儲存的已知身份標識的生物特徵進行匹配，並將匹配成功的資料庫中的生物特徵的身份標識確定為目標對象的身份標識；若匹配不成功，則為目標對象分配身份標識，並將為目標對象分配的身份標識，以及其對應的生物特徵儲存進資料庫中。

在確定目標對象的年齡時，可以將影片畫面輸入至預先訓練好的神經網路模型中，預測該影片畫面中對應的目標對象的年齡。目標對象的魅力值、表情、微笑值等屬性特徵的檢測方法可以與目標對象的年齡的檢測方法類似，在此將不再贅述，但是需要說明的是，預測不同屬性特徵所應用的神經網路模型不同，不同神經網路模型的訓練過程也不同相同。

當目標對象的屬性特徵包括年齡、魅力值、表情、微笑值中的多個特徵時，也可以基於同一個神經網路模型對影片畫面中的目標用戶的多個特徵進行預測，但是需要說明的是，在訓練該神經網路模型時，其監督資料的標籤需要為多個特徵標籤。

目標對象的觀看時長的確定方法可以與在課堂場景中學生的關注時長的確定方法相同，在此將不再贅述。

考慮到目標對象的狀態（如姿勢、面部神態等）可能是一直變化的，因此，目標對象的屬性特徵也可以是發生變化的。例如若目標對象改變面部神態，可能檢測出的目標對象的表情、微笑值、魅力值等會發生變化。

在一種可能的實施方式中，在檢測到目標對象的屬性特徵發生變化的情況下，還可以控制第一顯示區域中第二展示對象隨該屬性特徵的變化而變換展示狀態。示例性的，第二展示對象可以如圖4所示，在每個目標對象的周圍可以展示有展示框。展示框中可以展示有目標對象的身份、年齡、魅力值、表情、觀看時長、以及微笑值的至少一種，展示框的顯示位置可以在目標對象周邊的固定位置。例如可以檢測目標對象的身體關鍵點，然後根據身體關鍵點來確定展示位置，進而展示該目標對象對應的展示框。

上述方案中，通過展示與目標對象屬性特徵對應的第二展示對象，可以實現對於不同目標對象的個性化展示，滿足不同目標對象的展示需求。

情況3：在檢測到影片畫面中包括目標對象的情況下，可以在顯示螢幕的第二顯示區域中展示目標對象的簽到資訊。

相關技術中，在舉辦活動時需要對到場人員的資訊進行統計時，往往需要由專門的工作人員進行人工統計，例如在簽到表上簽字、錄入身份資訊等，操作繁瑣且簽到效率較低。

在一些實施例中，目標對象可以是預定的到場人員。例如若應用場景為某場會議，則目標對象為預先確定的參會人員。

在一種可能的實施方式中，可以預先輸入目標對象的生物特徵（如面部特徵、步態特徵、REID特徵等）。在獲取到影片畫面之後，檢測影片畫面中的每一個對象的生物特徵，將檢測的生物特徵與預先輸入的生物特徵進行比對，並將比對結果為成功的對象確定為目標對象。

第二顯示區域中可以展示有目標對象的簽到資訊，簽到資訊例如可以包括目標對象的照片和/或目標對象的身份資訊。在檢測到影片畫面中包括目標對象之後，可以改變第二顯示區域中目標對象的簽到資訊的展示狀態。

在一些實施例中，簽到資訊可以在第二顯示區域中以資訊卡的形式進行展示，每個資訊卡中展示有目標對象的照片和/或目標對象的身份資訊。在改變簽到資訊的展示狀態時可以改變資訊卡的背景顏色，或者在未改變簽到資訊的展示狀態之前資訊卡的顏色可以為灰色，改變簽到資訊的展示狀態的方式可以為點亮資訊卡等。

在另外一種可能的實施方式中，在控制第一顯示區域中的展示對象變換展示狀態，且檢測到變換後的展示狀態為目標展示狀態的情況下，還可以標記第二顯示區域中展示的目標對象的簽到資訊。

示例性的，若第一顯示區域中展示對象為花朵特效，花朵特效旁邊可以有提示語“微笑成為VIP”。當檢測到目標對象微笑之後，控制花朵特效的顏色改變，即展示對象的展示狀態為目標展示狀態。此時可以在第二顯示區域中對應的目標對象的簽到資訊添加標記，例如可以在第二顯示區域中目標對象的簽到資訊中添加“VIP”標誌。

其中，在改變目標對象的簽到資訊的展示狀態之前，簽到資訊中所包含的照片可以是預先儲存在資料庫中的圖片。在為簽到資訊進行標記時，還可以從影片畫面中截取目標對象的一張照片，並用截取的照片替換簽到資訊中目標對象的照片。截取的照片可以是隨機截取的，也可以是從清晰度最高的一幀影片影像中截取的。

在一種可能的實施方式中，第二顯示區域中的位置有限，而目標對象的個數為多個。在這種情況下，目標對象的簽到資訊可以滾動顯示，或者，在為目標對象的簽到資訊添加標記之後的一段時間之後，可以不在第二顯示區域中顯示該目標對象的簽到資訊。

基於上述方案，可以實現目標對象的自動簽到，簡化簽到步驟，提高簽到效率；通過為目標對象的簽到資訊進行標記，可以豐富簽到資訊的展示方式，並能夠區分展示狀態為目標展示狀態的目標對象、和展示狀態不是目標展示狀態的目標對象。

情況4：在檢測到影片畫面中包括目標對象的情況下，可以在顯示螢幕的第三顯示區域中展示目標對象的描述資訊。

目標對象的描述資訊可以是目標對象的屬性資訊、以及從影片畫面中截取的目標對象的人臉影像。

在不同的場景中，目標對象的屬性資訊可以不同，例如在課堂場景中，目標對象的屬性資訊可以包括學號、性別、年齡、上課次數等；而在展會、商場等公共場所，目標對象的屬性資訊可以包括身份標識、性別、到訪次數、停留時長等。

第三顯示區域中可以展示的目標對象的描述資訊是有限的。例如第三顯示區域僅可以展示N個目標對象的描述資訊，在影片畫面中包括的目標對象的個數小於或等於N的情況下，第三顯示區域可以展示全部目標對象的描述資訊；在影片畫面中包括的目標對象的個數大於N的情況下，例如影片畫面中包括N+1個目標對象，則可以將最先展示的目標對象的描述資訊刪除，並展示最新的第N+1個出現在影片畫面中的目標對象的描述資訊，N為正整數。

本申請一種可能的實施方式中，第三顯示區域還可以僅展示出現在影片畫面中的前M個目標對象的描述資訊，影片畫面中的第M位之後出現的目標對象的描述資訊不進行展示，M為正整數，M與N可以相等也可以不等。或者，展示符合特定屬性特徵的前M個目標對象的描述資訊。

在控制第一顯示區域中展示對象進行展示狀態的變換，且檢測到變換後的展示狀態為目標展示狀態的情況下，還可以標記第三顯示區域中展示的目標對象的描述資訊。

示例性的，在檢測到影片畫面中包括目標對象之後，可以在對應位置展示花朵特效，以及“微笑成為VIP”的提示語。在檢測到目標對象微笑之後，可以改變花朵特效的顏色（即第一顯示區域中的展示對象的展示狀態變為目標展示狀態），然後將第三顯示區域中展示的目標對象的描述資訊添加“VIP”的標記，還可以將描述資訊的背景顏色由初始顏色更改為目標顏色。

上述方案中，可以展示目標對象的描述資訊，並在展示對象的展示狀態變換為目標展示狀態後，為描述資訊添加標記，豐富了描述資訊的展示方式，增加了與用戶之間的互動。

情況5：在檢測到影片畫面中包括目標對象的情況下，可以在顯示螢幕的第四顯示區域展示業務內容。

其中，第四顯示區域展示的業務內容例如可以是廣告、宣傳影片、或者是場所介紹資訊等，業務內容的形式不限於圖片、文字、音頻、影片等。

基於對影片畫面中目標對象的累計檢測結果，控制顯示螢幕中展示對象變化展示狀態的可以包括：在檢測到影片畫面中目標對象的姿態由第一姿態切換為第二姿態的情況下，控制將第四顯示區域中展示的業務內容由第一業務內容切換為第二業務內容。

其中，目標對象當前的姿態為第一姿態，預先設置的姿態為第二姿態；第四顯示區域當前展示的業務內容為第一業務內容，除第一業務內容之外的其他業務內容為第二業務內容。

在第四顯示區域中可以顯示有指示語，用於指示目標對象做出第二姿態以切換業務內容，示例性的，提示語可以為“請揮手來切換展示內容”。目標對象當前的姿態為第一姿態，在檢測到目標對象做出揮手動作的情況下，即當檢測到目標對象由第一姿態切換為第二姿態的情況下，控制第四顯示區域中展示的業務內容進行切換。

上述方案中，可以在檢測到目標對象的姿態發生變化時，控制第四顯示區域中展示的業務內容進行切換。這樣，增加了與目標對象之間的互動，豐富了業務內容的切換方式。

情況6：在檢測到影片畫面中包括至少一個目標對象的情況下，在顯示螢幕的第五顯示區域中展示至少一個目標對象的特徵分布資訊。

其中，特徵分布資訊可以包括但不限於：年齡分布、性別分布、到場人次分布、熱門路線分布、區域人群密度分布等。

其中，在特徵分布資訊包括熱門路線分布時，電子設備可以與多個攝像裝置連接（其連接方式可以為有線連接或無線連接）；可以先確定每一個目標對象的移動路線，然後從多個移動路線篩選出熱門路線並進行展示。

其中，如圖5所示，確定目標對象的移動路線的方法可以包括步驟S501~S504。

步驟S501、獲取第一攝像裝置的擷取資料，擷取資料包括擷取的人臉影像以及第一攝像裝置的標識資訊。

步驟S502、獲取第一攝像裝置的標識資訊對應的位置描述資訊。

步驟S503、基於第一攝像裝置的位置描述資訊，確定人臉影像標識的目標對象的移動資料。

步驟S504、利用移動資料，確定目標對象的移動路線。

具體的，第一攝像裝置可以是當前拍攝到目標對象的攝像裝置，第一攝像裝置的擷取資料還包括人臉影像的擷取時間；在檢測到所述擷取時間之前的設定時間段內已得到所述目標對象的歷史移動資料的情況下，可以基於所述第一攝像裝置的位置描述資訊對所述歷史移動資料進行更新，得到所述移動資料；在檢測到所述擷取時間之前的設定時間段內未得到所述目標用戶的歷史移動資料的情況下，將所述第一攝像裝置的位置描述資訊作為所述移動資料。歷史移動資料包括至少一個第二攝像裝置的位置描述資訊，其中，第二攝像裝置為在擷取時間之前的設定時間段內擷取到目標對象的人臉影像的攝像裝置。

在一種可能的實施方式中，所述基於對影片畫面中目標對象的累計檢測結果，控制顯示螢幕中的所述展示對象進行展示狀態的變換，可以包括：基於對至少一個目標對象的累計檢測結果，控制更新第五顯示區域中展示的特徵分布資訊。

示例性的，若特徵分布資訊包括性別分布，當前影片畫面中包括5個男性目標對象，2個女性目標對象，則展示的特徵分布資訊中可以顯示男女比例為5:2；或者在展示性別分布時，可以採用餅狀圖的形式進行展示，對於其展示方式本發明實施例中並不限制。

上述方式中，通過展示和更新第五顯示區域中的特徵分布資訊，可以實現對於影片畫面中的目標對象的統計和分析。

示例性的，在檢測到影片畫面中包括目標對象的情況下，展示與目標對象關聯的展示對象若同時包括上述情況1~情況6，則顯示螢幕中各個顯示區域的分布情況可以如圖6所示，其中，第一顯示區域和第四顯示區域可以為同一區域，即展示獲取的影片畫面、第一展示對象和展示業務內容為不同的展示模式。

在第一顯示區域和第四顯示區域為不同區域的情況下，即在顯示螢幕上同時展示影片畫面和業務內容時，顯示螢幕中各個顯示區域的分布情況示例性的還可以如圖7所示。

本領域技術人員可以理解，在具體實施方式的上述方法中，各步驟的撰寫順序並不意味著嚴格的執行順序而對實施過程構成任何限定，各步驟的具體執行順序應當以其功能和可能的內在邏輯確定。

基於相同的構思，本發明實施例還提供了一種展示對象的控制裝置，參見圖8所示，為本發明實施例所提供的展示對象的控制裝置的架構示意圖，包括第一展示模組801、第二展示模組802、以及控制模組803，具體的：

第一展示模組801，用於在顯示螢幕中展示獲取的影片畫面；

第二展示模組802，用於在檢測到所述影片畫面中包括目標對象的情況下，在所述顯示螢幕中展示與所述目標對象關聯的展示對象；

控制模組803，用於基於對所述影片畫面中所述目標對象的累計檢測結果，控制所述顯示螢幕中的所述展示對象變換展示狀態。

一種可能的實施方式中，所述第二展示模組802可以用於：在檢測到所述影片畫面中包括所述目標對象的情況下，在所述顯示螢幕的第一顯示區域中展示初始展示狀態的第一展示對象；其中，所述初始展示狀態用於提示所述目標對象做出目標姿態。

一種可能的實施方式中，所述控制模組803可以用於：檢測所述影片畫面中所述目標對象做出的所述目標姿態；基於所述目標對象做出所述目標姿態的累計時長或累計次數，控制所述第一顯示區域中的所述第一展示對象變換展示狀態。

一種可能的實施方式中，所述控制模組803可以用於：在所述累計時長或累計次數未達到設定值的情況下，控制所述第一展示對象將展示狀態變換為中間展示狀態；其中，所述中間展示狀態隨所述累計時長或累計次數的累計值變化，以指示所述累計值。

一種可能的實施方式中，所述控制模組803可以用於：在所述累計時長或累計次數達到設定值的情況下，控制所述第一展示對象將展示狀態變換為第一目標展示狀態，以指示所述目標對象做出的所述目標姿態已符合設定條件。

一種可能的實施方式中，所述第二展示模組802可以用於：檢測所述影片畫面中所述目標對象的屬性特徵；在所述顯示螢幕的第一顯示區域中展示與所述屬性特徵對應的第二展示對象。

一種可能的實施方式中，所述控制模組803可以用於：在檢測到所述目標對象的目標屬性特徵發生變化的情況下，控制所述第一顯示區域中的所述第二展示對象隨所述屬性特徵的變化而變換展示狀態。

一種可能的實施方式中，所述第二展示對象包括以下資訊中的至少一種：所述目標對象的身份標識、年齡值、微笑值、魅力值、觀看時長、不同種情緒的時長、關注時長。

一種可能的實施方式中，所述第二展示模組802可以用於：在檢測到所述影片畫面中包括所述目標對象的情況下，在所述顯示螢幕的第二顯示區域中展示所述目標對象的簽到資訊。

一種可能的實施方式中，所述控制模組803可以還用於：在控制所述顯示螢幕的第一顯示區域中的所述展示對象變換展示狀態，且檢測到變換後的展示狀態為目標展示狀態的情況下，標記所述第二顯示區域中展示的所述目標對象的簽到資訊。

一種可能的實施方式中，所述第二展示模組802可以用於：在檢測到所述影片畫面中包括所述目標對象的情況下，在所述顯示螢幕的第三顯示區域中展示所述目標對象的描述資訊。

一種可能的實施方式中，所述控制模組803可以還用於：在控制所述顯示螢幕的第一顯示區域中的所述展示對象變換展示狀態，且檢測到變換後的展示狀態為目標展示狀態的情況下，標記所述第三顯示區域中展示的所述目標對象的描述資訊進行。

一種可能的實施方式中，所述第二展示模組802可以用於：在檢測到所述影片畫面中包括所述目標對象的情況下，在所述顯示螢幕的第四顯示區域中展示業務內容。

一種可能的實施方式中，所述控制模組803可以用於：在檢測到所述影片畫面中所述目標對象的姿態由第一姿態切換為第二姿態的情況下，控制將所述第四顯示區域中展示的所述業務內容由第一業務內容切換為第二業務內容。

一種可能的實施方式中，所述第二展示模組802可以用於：在檢測到所述影片畫面中包括至少一個所述目標對象的情況下，在所述顯示螢幕的第五顯示區域中展示至少一個所述目標對象的特徵分布資訊。

一種可能的實施方式中，所述控制模組803可以用於：基於對至少一個所述目標對象的累計檢測結果，控制更新所述第五顯示區域中展示的所述特徵分布資訊。

在一些實施例中，本發明實施例提供的裝置具有的功能或包含的模板可以用於執行上文方法實施例描述的方法，其具體實現可以參照上文方法實施例的描述，為了簡潔，這裡不再贅述。

基於同一技術構思，本發明實施例還提供了一種電子設備。參照圖9所示，所述電子設備可以包括：處理器901、記憶體902、和匯流排903。其中，記憶體902包括內存9021和外部記憶體9022。這裡的內存9021也稱主記憶體，用於暫時存放處理器901中的運算資料，以及與硬碟等外部記憶體9022交換的資料，處理器901通過內存9021與外部記憶體9022進行資料交換。當電子設備900運行時，處理器901與記憶體902之間通過匯流排903通訊。所述記憶體902儲存有所述處理器901可執行的電腦可讀指令，該電腦可讀指令被處理器901執行時，使所述處理器901可以實現上述任一種移動狀態資訊展示方法。

其中，處理器901執行的具體處理過程可參照上述方法實施例中的描述，這裡不再展開說明。

此外，本發明實施例還提供一種電腦可讀取記錄媒體，該電腦可讀取記錄媒體上儲存有電腦程式，其中，該電腦程式被處理器執行時，使所述處理器可以實現上述任一種展示對象的控制方法。

本發明實施例所提供的展示對象的控制方法的電腦程式產品，包括儲存了程式碼的電腦可讀取記錄媒體，所述程式碼包括的指令可用於執行上述方法實施例中所述的展示對象的控制方法的步驟，具體可參見上述方法實施例，在此不再贅述。

所屬領域的技術人員可以清楚地瞭解到，為描述的方便和簡潔，上述描述的系統和裝置的具體工作過程，可以參考前述方法實施例中的對應過程，在此不再贅述。在本發明所提供的幾個實施例中，應該理解到，所揭露的系統、裝置和方法，可以通過其它的方式實現。以上所描述的裝置實施例僅僅是示意性的，例如，所述單元的劃分，僅僅為一種邏輯功能劃分，實際實現時可以有另外的劃分方式。又例如，多個單元或組件可以結合或者可以整合到另一個系統，或一些特徵可以忽略，或不執行。另一點，所顯示或討論的相互之間的耦合或直接耦合或通訊連接可以是通過一些通訊介面，裝置或單元的間接耦合或通訊連接，可以是電性，機械或其它的形式。

所述作為分離部件說明的單元可以是或者也可以不是物理上分開的，作為單元顯示的部件可以是或者也可以不是物理單元，即可以位於一個地方，或者也可以分布到多個網路單元上。可以根據實際的需要選擇其中的部分或者全部單元來實現本發明的實施例的目的。

另外，在本發明各個實施例中的各功能單元可以整合在一個處理單元中，也可以是各個單元單獨物理存在，也可以兩個或兩個以上單元整合在一個單元中。

所述功能如果以軟體功能單元的形式實現並作為獨立的產品銷售或使用時，可以儲存在一個處理器可執行的非暫態的電腦可讀取記錄媒體中。基於這樣的理解，本發明的實施例本質上或者說對現有技術做出貢獻的部分或者該實施例的部分可以以軟體產品的形式體現出來。該電腦軟體產品儲存在一個記錄媒體中，包括若干指令用以使得一台計算機設備（可以是個人電腦，伺服器，或者網路設備等）執行本發明各個實施例所述方法的全部或部分步驟。而前述的記錄媒體包括：隨身碟、隨身硬碟、唯讀記憶體（Read-Only Memory，ROM）、隨機存取記憶體（Random Access Memory，RAM）、磁碟或者光碟等各種可以儲存程式碼的介質。

以上僅為本發明的一些實施方式，但本發明的保護範圍並不局限於此。任何熟悉本技術領域的技術人員基於本發明而輕易想到的變化或替換都應涵蓋在本發明的範圍之內。因此，本發明的範圍由請求項確定。

S101~S103, S501~S504:步驟 801:第一展示模組 802:第二展示模組 803:控制模組 900:電子設備 901:處理器 902:記憶體 9021:內存 9022:外部記憶體 903:匯流排

為了更清楚地說明本發明的實施例，下面將對實施例中所需要使用的附圖作簡單地介紹，此處的附圖被併入說明書中並構成本說明書中的一部分，這些附圖示出了符合本發明的實施例，並與說明書一起用於說明本發明的實施例。應當理解，以下附圖僅示出了本發明的某些實施例，因此不應被看作是對範圍的限定，對於本領域通常知識者來講，在不付出創造性勞動的前提下，還可以根據這些附圖獲得其他相關的附圖。圖1示出了本發明實施例所提供的一種展示對象的控制方法的流程示意圖。圖2示出了本發明實施例所提供的一種第一顯示區域的界面示意圖。圖3示出了本發明實施例所提供的一種特效展示示意圖。圖4示出了本發明實施例所提供的一種第二展示對象展示示意圖。圖5示出了本發明實施例所提供的一種目標對象的移動路線的確定方法的示意圖。圖6示出了本發明實施例所提供的一種顯示螢幕中各個顯示區域的分布示意圖。圖7示出了本發明實施例所提供的另一種顯示螢幕中各個顯示區域的分布示意圖。圖8示出了本發明實施例所提供的一種展示對象的控制裝置的架構示意圖。圖9示出了本發明實施例所提供的一種電子設備的結構示意圖。

S101~S103:步驟

Claims

一種展示對象的控制方法，包括：在顯示螢幕中展示獲取的影片畫面；在檢測到所述影片畫面中包括目標對象的情況下，在所述顯示螢幕中展示與所述目標對象關聯的展示對象；基於對所述影片畫面中所述目標對象的累計檢測結果，控制所述顯示螢幕中的所述展示對象變換展示狀態；其中，在檢測到所述影片畫面中包括所述目標對象的情況下，在所述顯示螢幕中展示與所述目標對象關聯的所述展示對象，包括：在檢測到所述影片畫面中包括所述目標對象的情況下，在所述顯示螢幕的第三顯示區域中展示所述目標對象的描述資訊，其中，所述目標對象的描述資訊包括所述目標對象的屬性資訊、以及從所述影片畫面中截取的所述目標對象的人臉影像；其中，所述方法還包括：在控制所述顯示螢幕的第一顯示區域中的所述展示對象變換展示狀態，且檢測到變換後的展示狀態為目標展示狀態的情況下，標記所述第三顯示區域中展示的所述目標對象的描述資訊。
如請求項1所述的方法，其中，在檢測到所述影片畫面中包括所述目標對象的情況下，在所述顯示螢幕中展示與所述目標對象關聯的所述展示對象，包括：在檢測到所述影片畫面中包括所述目標對象的情況下，在所述第一顯示區域中展示初始展示狀態的第一展示對象，其中，所述初始展示狀態用於提示所述目標對象做出目標姿態。
如請求項2所述的方法，其中，基於對所述影片畫面中所述目標對象的累計檢測結果，控制所述顯示螢幕中的所述展示對象變換展示狀態，包括：檢測所述影片畫面中所述目標對象做出的所述目標姿態；基於所述目標對象做出所述目標姿態的累計時長或累計次數，控制所述第一顯示區域中的所述第一展示對象變換展示狀態。
如請求項3所述的方法，其中，基於所述目標對象做出所述目標姿態的所述累計時長或累計次數，控制所述第一顯示區域中的所述第一展示對象變換展示狀態，包括：在所述累計時長或累計次數未達到設定值的情況下，控制所述第一展示對象將展示狀態變換為中間展示狀態，其中，所述中間展示狀態隨所述累計時長或累計次數的累計值變化，以指示所述累計值。
如請求項3所述的方法，其中，基於所述目標對象做出所述目標姿態的所述累計時長或累計次數，控制所述第一顯示區域中的所述第一展示對象變換展示狀態，包括：在所述累計時長或累計次數達到設定值的情況下，控制所述第一展示對象將展示狀態變換為第一目標展示狀態，以指示所述目標對象做出的所述目標姿態已符合設定條件。
如請求項1所述的方法，其中，在檢測到所述影片畫面中包括所述目標對象的情況下，在所述顯示螢幕中展示與所述目標對象關聯的所述展示對象，包括：在檢測到所述影片畫面中包括所述目標對象的情況下，檢測所述影片畫面中所述目標對象的屬性特徵；在所述第一顯示區域中展示與所述屬性特徵對應的第二展示對象。
如請求項6所述的方法，其中，基於對所述影片畫面中所述目標對象的累計檢測結果，控制所述顯示螢幕中的所述展示對象變換展示狀態，包括：在檢測到所述目標對象的屬性特徵發生變化的情況下，控制所述第一顯示區域中的所述第二展示對象隨所述屬性特徵的變化而變換展示狀態。
如請求項6或7所述的方法，其中，所述第二展示對象包括以下資訊中的至少一種：所述目標對象的身份標識、年齡值、微笑值、魅力值、觀看時長、不同種情緒的時長、關注時長。
如請求項1所述的方法，其中，在檢測到所述影片畫面中包括所述目標對象的情況下，在所述顯示螢幕中展示與所述目標對象關聯的所述展示對象，包括：在檢測到所述影片畫面中包括所述目標對象的情況下，在所述顯示螢幕的第二顯示區域中展示所述目標對象的簽到資訊。
如請求項9所述的方法，所述方法還包括：在控制所述第一顯示區域中的所述展示對象變換展示狀態，且檢測到變換後的展示狀態為目標展示狀態的情況下，標記所述第二顯示區域中展示的所述目標對象的簽到資訊。
如請求項1所述的方法，其中，在檢測到所述影片畫面中包括所述目標對象的情況下，在所述顯示螢幕中展示與所述目標對象關聯的所述展示對象，包括：在檢測到所述影片畫面中包括所述目標對象的情況下，在所述顯示螢幕的第四顯示區域中展示業務內容。
如請求項11所述的方法，其中，基於對所述影片畫面中所述目標對象的累計檢測結果，控制所述顯示螢幕中的所述展示對象變換展示狀態，包括：在檢測到所述影片畫面中所述目標對象的姿態由第一姿態切換為第二姿態的情況下，控制將所述第四顯示區域中展示的所述業務內容由第一業務內容切換為第二業務內容。
如請求項1所述的方法，其中，在檢測到所述影片畫面中包括所述目標對象的情況下，在所述顯示螢幕中展示與所述目標對象關聯的所述展示對象，包括：在檢測到所述影片畫面中包括至少一個所述目標對象的情況下，在所述顯示螢幕的第五顯示區域中展示至少一個所述目標對象的特徵分布資訊。
如請求項13所述的方法，其中，基於對所述影片畫面中所述目標對象的累計檢測結果，控制所述顯示螢幕中的所述展示對象變換展示狀態，包括：基於對至少一個所述目標對象的累計檢測結果，控制更新所述第五顯示區域中展示的所述特徵分布資訊。
一種展示對象的控制裝置，包括：第一展示模組，用於在顯示螢幕中展示獲取的影片畫面；第二展示模組，用於在檢測到所述影片畫面中包括目標對象的情況下，在所述顯示螢幕中展示與所述目標對象關聯的展示對象；控制模組，用於基於對所述影片畫面中所述目標對象的累計檢測結果，控制所述顯示螢幕中的所述展示對象變換展示狀態，其中，在檢測到所述影片畫面中包括所述目標對象的情況下，在所述顯示螢幕中展示與所述目標對象關聯的所述展示對象，包括：在檢測到所述影片畫面中包括所述目標對象的情況下，在所述顯示螢幕的第三顯示區域中展示所述目標對象的描述資訊，其中，所述目標對象的描述資訊包括所述目標對象的屬性資訊、以及從所述影片畫面中截取的所述目標對象的人臉影像；其中，所述控制模組在控制所述顯示螢幕的第一顯示區域中的所述展示對象變換展示狀態，且檢測到變換後的展示狀態為目標展示狀態的情況下，標記所述第三顯示區域中展示的所述目標對象的描述資訊。
一種電子設備，包括：處理器；和記憶體，其中，所述記憶體儲存有所述處理器可執行的電腦可讀指令，所述電腦可讀指令被所述處理器執行時，使所述處理器實現如請求項1至14任一所述的展示對象的控制方法。
一種電腦可讀取記錄媒體，該電腦可讀取記錄媒體上儲存有電腦程式，其中，該電腦程式被處理器執行時，使所述處理器實現如請求項1至14任一所述的展示對象的控制方法。