JP2022515317A - 展示対象制御方法、装置、電子デバイス、及び記録媒体 - Google Patents

展示対象制御方法、装置、電子デバイス、及び記録媒体 Download PDF

Info

Publication number
JP2022515317A
JP2022515317A JP2021527860A JP2021527860A JP2022515317A JP 2022515317 A JP2022515317 A JP 2022515317A JP 2021527860 A JP2021527860 A JP 2021527860A JP 2021527860 A JP2021527860 A JP 2021527860A JP 2022515317 A JP2022515317 A JP 2022515317A
Authority
JP
Japan
Prior art keywords
target
exhibition
display
target object
detected
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2021527860A
Other languages
English (en)
Inventor
▲賀▼然 ▲孫▼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Sensetime Technology Development Co Ltd
Original Assignee
Beijing Sensetime Technology Development Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Sensetime Technology Development Co Ltd filed Critical Beijing Sensetime Technology Development Co Ltd
Publication of JP2022515317A publication Critical patent/JP2022515317A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content

Abstract

本発明は、展示対象制御方法、装置、電子デバイス、及び記録媒体を提供する。当該方法は、取得したビデオ画面を表示スクリーンに展示することと、前記ビデオ画面内に目標対象が含まれていることが検出された場合、前記目標対象に関連された展示対象を前記表示スクリーンに展示することと、前記ビデオ画面内の前記目標対象に対する累積検出結果に基づいて、前記表示スクリーン内の前記展示対象が展示状態を変換するように制御することと、を含む。【選択図】図1

Description

<関連出願の互いに引用>
本発明は、出願日が2019年11月28日であり、出願番号が201911190043.Xであり、発明名称が「展示対象制御方法、装置、デバイス、及び記録媒体」である中国特許出願の優先権を主張し、当該中国特許出願の全ての内容が参照として本願に組み入れられる。
本発明は、コンピュータ技術の分野に関し、具体的には、展示対象制御方法、装置、電子デバイス、及び記録媒体に関する。
いくつかの場所またはエリアで行事を開催する場合、一般的に、出席者の情報を統計することになる。出席者に対する情報統計は、サインインフォームへの署名、身分情報の入力など、専門スタッフが手動で統計することがよくあり、操作が煩雑で、操作過程が単純であるため、出席者とのやり取りに不利である。
これに鑑みて、本発明は、少なくとも展示対象制御の解決策を提供する。
第1態様によると、本発明は、展示対象制御方法を提供し、当該方法は、取得したビデオ画面を表示スクリーンに展示することと、前記ビデオ画面内に目標対象が含まれていることが検出された場合、前記目標対象に関連された展示対象を前記表示スクリーンに展示することと、前記ビデオ画面内の前記目標対象に対する累積検出結果に基づいて、前記表示スクリーン内の前記展示対象が展示状態を変換するように制御することと、を含む。
上記で目標対象に対する自動検出の解決策を提供し、表示スクリーン内に展示されたビデオ画面に基づいて、ビデオ画面内に目標対象が含まれているか否かを検出することができ、ビデオ画面内に目標対象が含まれていることが検出された場合、目標対象に関連された展示対象を展示し、ビデオ画面内の目標対象に対する累積検出結果に基づいて、展示対象が展示状態を変換するように制御することができる。目標対象が状態情報を変更することに従って(たとえばジェスチャ、笑顔など)、累積検出結果もこれに応じて変更され、さらに展示対象が展示状態を変換するように制御することができることによって、展示効果を豊富にすることができ、目標対象との間のインタラクションを向上させることができる。
第2態様によると、本発明は、展示対象制御装置を提供し、当該装置は、取得したビデオ画面を表示スクリーンに展示するための第1展示モジュールと、前記ビデオ画面内に目標対象が含まれていることが検出された場合、前記目標対象に関連された展示対象を前記表示スクリーンに展示するための第2展示モジュールと、前記ビデオ画面内の前記目標対象に対する累積検出結果に基づいて、前記表示スクリーン内の前記展示対象が展示状態を変換するように制御するための制御モジュールと、を備える。
第3態様によると、本発明は、電子デバイスを提供し、当該電子デバイスは、プロセッサと、メモリと、を備え、前記メモリには、前記プロセッサによって実行可能な機械可読命令が格納されており、前記機械可読命令が前記プロセッサによって実行されると、前記プロセッサが、上記の第1態様に記載の展示対象制御方法を実現するようにする。
第4態様によると、本発明は、コンピュータプログラムが格納されているコンピュータ可読記録媒体を提供し、当該コンピュータプログラムがプロセッサによって運行されると、前記プロセッサが、上記の第1態様に記載の展示対象制御方法を実現するようにする。
以下、本発明の上記の目的、特徴、および、利点をより明確かつ理解可能にするために、好ましい実施例を挙げて、図面を参照しながら詳細に説明する。
以下、本発明の実施例をより明確に説明するために、実施例に必要な図面を簡単に紹介する、本明細書の図面は、本明細書に組み込まれて本明細書の一部を構成し、これら図面本発明の実施例を示し、本明細書と一緒に、本発明の実施例を説明するために使用される。以下の図面は、本発明の特定の実施例を示すだけであり、したがって、範囲を限定するもとと見なされるべきではないことを理解すべきである、当業者にとって、創造的な作業なしで、これら図面に基づいての他の関連する図面を得ることができる。
本発明の実施例によって提供される展示対象制御方法のフローを示す模式図である。 本発明の実施例によって提供される第1表示エリアのインターフェースを示す模式図である。 本発明の実施例によって提供される特殊効果展示を示す模式図である。 本発明の実施例によって提供される第2展示対象展示を示す模式図である。 本発明の実施例によって提供される目標対象の移動経路の確定方法を示す模式図である。 本発明の実施例によって提供される表示スクリーン内の各表示エリアの分布を示す模式図である。 本発明の実施例によって提供されるもう1つの表示スクリーン内の各表示エリアの分布を示す模式図である。 本発明の実施例によって提供される展示対象制御装置の構成を示す模式図である。 本発明の実施例によって提供される電子デバイスの構成を示す模式図である。
以下、本発明の実施例の目的および利点をより明確にするために、図面を参照しながら、本発明の実施例を明確で完全に記述する。当然ながら、記述される実施例は、本発明のいくつかの実施例に過ぎず、すべての実施例ではない。一般的に、本明細書の図面に記述および示されている本発明の実施例の構成要素は、異なる構成で配置および設計することができる。したがって、図面に提供される本発明の実施例の以下の詳細な記述は、請求された本発明の範囲を限定することを意図するものではなく、単に本発明の選定された実施例を表す。本発明の実施例に基づいて、当業者在創造的な作業なしに得られたすべてのその他の実施例、本発明の保護範囲に含まれるものとする。
本発明で使用される用語は、特定の実施例を説明することのみを目的としており、本発明を限定することを意図するものではない。本発明で使用される「一種」、「前記」、「当該」などの単数形は、文脈が他の意味を明確に示さない限り、複数形を含むことを意図している。本明細書で使用される「および/または」という用語は、1つまたは複数の関連するリストされたアイテムの任意の1つまたはすべての可能な組み合わせを含むことを指すことを理解すべきである。
本発明では、第1、第2、第3などの用語を使用して様々な情報を記述することがあるが、これら情報はこれら用語によって限制されるべきではないことを理解すべきである。これら用語は、同じ種類の情報を互いに区別するためにのみ使用される。たとえば、本開示の範囲から逸脱することなく、第1の情報は、第2の情報とも呼ばれ得、同様に、第2の情報は、第1の情報とも呼ばれ得る。文脈に応じて、本明細書で使用される「もし」という単語は、「…場合」、「…すると」、または、「…ことに応答して」と解釈することができる。
まず、本発明の実施例に適用するアプリケーションシナリオを紹介する。本発明は、データ処理能力を有する電子デバイスに適用することができる。電子デバイスには、データ処理結果を表示するための表示装置が配置されていてもよいし、データ処理結果を表示するための表示装置が接続されていてもよく、その接続方法は、有線接続および/または無線接続に限定されない。電子デバイスには、少なくとも1つの外部撮影装置がさらに接続されてもよく、その接続方法は、有線接続および/または無線接続に限定されない。電子デバイスは、自身と接続されている撮影装置と同じ位置エリアに配置されてもよく、撮影装置は、ビデオ画面を撮影した後に、電子デバイスに伝送して処理を行うようにし、電子デバイスによって処理された後に、電子デバイスに配置されている表示装置または電子デバイスに接続されている外部表示装置(たとえば表示スクリーン)を利用して表示する。ここで、電子デバイスは、たとえば携帯電話、タブレットコンピュータ、スマートテレビ、コンピュータなどであり得る。
いくつかの実施例において、目標対象は、ビデオ画面内で出現される一部またはすべてのユーザであってもよいし、ビデオ画面内に出現した所定の属性を満たすユーザ、または、予め設定された特定対象であってもよい。アプリケーションシナリオによって互いに異なる目標対象を確定することができる。
いくつかの実施例において、累積検出結果は、互いに異なる時点での、目標対象のある属性または目標対象がとったある姿態に対する検出結果の累積値である。具体的な属性または姿態は、アプリケーションシナリオによって設定することができ、また検出結果も以上の2種の情況に限定されない。
本発明の実施例に対する理解を容易にするために、まず、本発明によって提供される展示対象制御方法を詳細に紹介する。
図1に示したように、本発明の実施例によって提供される展示対象制御方法は、ステップS101~S103を含む。
S101において、取得したビデオ画面を表示スクリーンに展示する。
ここで、表示スクリーン内に展示されたビデオ画面は、撮影装置を利用してリアルタイムで撮影して取得したものであり得、撮影装置は、電子デバイスに内蔵されたカメラ、または、接続された外部撮影装置であり得る。撮影装置が電子デバイスに接続された外部装置であると、撮影装置は表示スクリーンと同じ位置エリア内に配置されることができ、たとえば同じ展示会または同じ部屋内に配置されることができる。表示スクリーン内に展示されたのが撮影装置によって撮影されたビデオ画面であることを考慮して、ユーザが自分の姿態(たとえば顔部の姿態および/または体の姿態)を見やすくするために、撮影装置は表示スクリーンと同じ垂直面に配置できる。または、ユーザが表示スクリーンを見ているときにユーザの完全な姿態を撮影できる位置を、撮影装置の配置位置として使用することができる。
S102において、ビデオ画面内に目標対象が含まれていることが検出された場合、表示スクリーン内に目標対象に関連された展示対象を展示する。
目標対象に関連された展示対象は、複数あり得、互いに異なる目標対象は、互いに異なる展示対象に関連され得、具体的には以下の実施例で詳細に紹介し、ここでは詳しく説明しない。
S103において、ビデオ画面内の目標対象に対する累積検出結果に基づいて、表示スクリーン内の展示対象の展示状態を変換するように制御する。
本発明の実施例においては、表示スクリーン内に展示されたビデオ画面に基づいて、ビデオ画面内に目標対象が含まれているか否かを検出することができ、ビデオ画面内に目標対象が含まれていることが検出された場合、目標対象に関連された展示対象を展示し、ビデオ画面内の目標対象に対する累積検出結果に基づいて、展示対象が展示状態を変換するように制御することができる。目標対象が状態情報を変更することに従って(たとえばジェスチャ、笑顔など)、累積検出結果もこれに応じて変更され、さらに展示対象が展示状態を変換するように制御することができることによって、展示効果を豊富にすることができ、目標対象との間のインタラクションを向上させることができる。
ステップ102において、前記目標対象は、画像収集範囲内に出現されたすべての対象であってもよいし、画像収集範囲内で完全な顔を取得できる一部の対象であってもよいし、または、画像収集範囲内の所定の属性特徴を満たす対象であってもよい。ここで、所定の属性特徴は、たとえば、性別、髪の長さ、服の色などのであり得る。目標対象が所定の属性特徴を満たす対象であると、ビデオ画面を取得した後に、まずビデオ画面内の各々の対象の属性特徴を認識し、続いて所定の属性特徴を満たす対象を目標対象として確定することができる。
他の可能な1実施形態において、目標対象は、特定対象(1つまたは複数であり得る)であり得、ここで、特定対象は、たとえば、展示会に参加する予定があるある人物であり得る。目標対象が特定対象である場合、特定対象の生物特徴を予め保存することができ、たとえば、顔の特徴、歩行特徴、歩行者の再識別(Person Re-identification、REID)特徴などを予め保存することができる。ビデオ画面内に目標対象が含まれているか否かを検出することは、ビデオ画面内の各々の対象の生物特徴を検出し、検出された生物特徴を予め保存した特定対象の生物特徴とマッチングし、マッチングに成功された対象を目標対象として確定することを含む。
可能な1実施形態において、ビデオ画面内に目標対象が含まれていることが検出された場合、目標対象に関連された展示対象を展示することは、以下の6種の状況の中の1種または複数種を含み得る。
状況1において、ビデオ画面内に目標対象が含まれていることが検出された場合、表示スクリーンの第1表示エリア内に、初期展示状態の第1展示対象を展示し、ここで、初期展示状態は、目標対象が目標姿態をとるようにプロンプトするために用いられる。
目標姿態は、たとえば、挙手の姿勢、笑顔の表情などの、姿勢および表情を含むが、これらに限定されない。
ここで、表示スクリーンの第1表示エリア内に、さらに取得したビデオ画面が展示されていてもよく、初期展示状態の第1展示対象を展示する場合、まず、ビデオ画面内の各目標対象のキーポイントを検出し、キーポイントの位置に基づいて、第1表示エリア内に初期展示状態の第1展示対象を展示することができる。
例示的に、図2は、第1表示エリアのインターフェースを示す模式図であり、図2に示したように、第1表示エリア内に、撮影装置によって撮影されたビデオ画面が展示されており、ビデオ画面内には複数の目標対象が含まれており、各目標対象の頭部の位置には、花の特殊効果が展示されている。展示された花は、初期展示状態の第1展示対象であり、花の周囲には、「笑顔しながらVIPになる」というプロンプト文があり、ユーザに笑顔をするようにプロンプトする(笑顔が目標姿態である)。別の1例において、花の周囲のプロンプト文を展示した後に、さらに、プロンプト文を音声でブロードキャストすることによって、目標対象に対して音声プロンプトを提供することができる。
本発明のいくつかの実施例は、さらに教室シナリオに適用され、第1表示エリア内には、撮影装置によってリアルタイムで撮影された教室画面が展示されており、撮影された教室画面内の各々の学生は、すべて目標対象である。各々の学生の頭部の位置には、手のひらの特殊効果が展示されており、手のひらの特殊効果は、第1展示対象であり得る。初期展示状態での手のひらの特殊効果は、破線フレームの手のひらのであり得る。手のひらの周囲には、「手を上げて質問してください」というプロンプト文があり、学生が手を挙げてインタラクションするようにプロンプトする。可能な1例において、手のひらの周囲にプロンプト文を展示した後に、さらに、展示されているプロンプト文を音声でブロードキャストすることによって、学生に対して音声でプロンプトすることができる。
具体的な実施において、ビデオ画面内の目標対象に対する累積検出結果に基づいて、表示スクリーン内の展示対象の展示状態を変換するように制御することは、ビデオ画面内の目標対象がとった目標姿態を検出し、目標対象が目標姿態をとった累積時間または累積回数に基づいて、第1表示エリア内の第1展示対象が展示状態を変換するように制御することを含み得る。
可能な1実施形態において、前記目標対象が目標姿態をとった累積時間または累積回数に基づいて、第1表示エリア内の第1展示対象が展示状態を変換するように制御することは、累積時間または累積回数が所定の値に達していない場合、第1展示対象が展示状態を中間展示状態に変換するように制御することを含み得、ここで、中間展示状態は、累積時間または累積回数の累積値に従って変化することによって、当該累積値を示す。
図2に示したように、初期展示状態の第1展示対象が花の特殊効果であると、第1表示エリア内の第1展示対象が展示状態を変換するように制御するときに、目標ユーザの笑顔持続時間に基づいて花の色を変更するか、または、花の下方のプログレスバー内のブロックを点灯することができる。たとえば、プログレスバー内の1つのブロックが2秒間の笑顔を示すと、目標対象の笑顔持続時間が10秒間であると、下から上に花の下方のプログレスバー内の5つのブロックを点灯することができる。また、点灯するブロックの数量に基づいて、ブロックの色を変更することができる。たとえば、5つのブロックのみが点灯される場合、ブロック色を青にし、点灯されるブロックの数量が増えると、ブロックの色を徐々に変更し、すべてのブロックが点灯されると、ブロックを赤にすることができる。
図3に示したように、教室のアプリケーションシナリオにおいて、学生(すなわち目標対象)の挙手回数を検出し、学生の挙手回数に基づいて、展示された手のひらの特殊効果を変更することができる。学生の挙手回数が4回であると、手のひらの特殊効果を点灯し、当該手のひらの特殊効果の後に「×4」の印を追加することができる。学生が初めて挙手すると、頭の位置に1つの手のひらの特殊効果を展示し、展示された手のひらの特殊効果の後に「×1」の印を追加することができる。
他の可能な1実施形態において、前記目標対象が目標姿態をとった累積時間または累積回数に基づいて、第1表示エリア内の第1展示対象が展示状態を変換するように制御することは、累積時間または累積回数が所定の値に達した場合、第1展示対象が展示状態を目標展示状態に変換することによって目標対象がとった目標姿態が既に所定の条件を満たすことを示すように制御することを含み得る。
上記の教室のアプリケーションシナリオにおいて、学生の挙手回数が所定の回数に達したことが検出されると、第1展示対象は、手のひらの特殊効果に加えて、星の特殊効果をさらに含み得る。第1展示対象の目標展示状態は、たとえば星の特殊効果の5つの星が順に点灯されることであり得、学生の挙手回数が所定の回数に達したことを示すために用いられる。同時に、手のひらの特殊効果の後に挙手回数を示すための印を追加することができる。
状況1においては、初期展示状態の第1展示対象を展示して、目標対象が目標姿態をとるようにプロンプトすることによって、目標対象との間のインタラクションを向上させ、第1展示対象が展示状態を変換するように制御することによって、第1展示対象に対してより多い展示方式を提供した。
状況2において、ビデオ画面内に目標対象が含まれていることが検出された場合、ビデオ画面内の目標対象の属性特徴を検出し、表示スクリーンの第1表示エリア内に属性特徴に対応する第2展示対象を展示することができる。
ここで、第2展示対象は、目標対象の身分識別子、年齢値、笑顔値、魅力値、観覧持続時間、各種類の感情の持続時間、注目持続時間の中の少なくとも1つを含み得る。異なるアプリケーションシナリオにおいて、属性特徴に対応する第2展示対象のタイプは、異なる可能性があり、具体的には実際の状況によって設定することができる。
例示的に、本発明のいくつかの実施例が教室シナリオに適用される場合、目標対象は、教室内の学生であり得、対応する第2展示対象は、授業持続時間、注目持続時間、ポジティブ感情持続時間、ネガティブ感情持続時間の中の少なくとも1つを含み得る。ここで、ポジティブ感情は、たとえば幸福、興奮、感動などであり得、ネガティブ感情は、たとえば恐怖、悲しみなどであり得る。授業持続時間は、電子デバイスが撮影装置によって撮影されたビデオ画面が取得し始めてから現在時点までの時間であり得る。注目持続時間は、撮影装置によって学生の完全な顔の特徴が収集された持続時間であり得る。いくつかの実施例において、以下の方式によって注目持続時間を確定することができ、すなわち、各フレームのビデオ画面内の学生の頭部の位置を検出することによって、学生の頭部の位置と所定の位置(たとえば黒板であり得る)との間のオフセット角度を確定し、オフセット角度が所定の角度範囲内にあると、学生が現在黒板を注目していると確定し、学生が黒板を注目しているビデオフレームの数を統計することによって、注目持続時間を確定する。
いくつかの実施例において、以下の方式によって学生のポジティブ感情持続時間およびネガティブ感情持続時間を検出することができ、すなわち、撮影したビデオ画面を事前にトレーニングされた感情認識モデルに入力して、ビデオ画面内の各々の学生に対応する感情を予測し、予測された感情に基づいて当該感情がポジティブ感情に属するかネガティブ感情に属するかを確定し、現在時点までの、学生の感情がポジティブ感情に属するビデオ画面の持続時間、および、学生の感情がネガティブ感情に属するビデオ画面の持続時間を統計し、それぞれ各種類の感情が出現されたビデオ画面の時間に基づいて、各々の学生に対応するポジティブ感情持続時間およびネガティブ感情持続時間を確定する。
本発明のいくつかの実施例は、さらに展示会またはショッピングモールなどの公共の場所にも適用され、このとき、第2展示対象は、身分識別子、年齢、魅力値、観覧持続時間、表情、笑顔値の中の1つまたは複数を含み得る。
ここで、目標対象の属性特徴は、目標対象の生物特徴(たとえば顔の特徴、歩行特徴、REID特徴など)であり得る。例示的に、まず、ビデオ画面内の目標対象の生物特徴を抽出し、続いて抽出した生物特徴とデータベース中の予め保存した身分識別子が既知である生物特徴とをマッチングし、マッチングに成功したデータベース中の生物特徴の身分識別子を目標対象の身分識別子として確定し、マッチングに成功されないと、目標対象に対して身分識別子を割り当て、目標対象に割り当てた身分識別子およびそれに対応する生物特徴をデータベースに保存する。
目標対象の年齢を確定する場合、ビデオ画面を事前にトレーニングされたニューラルネットワークモデルに入力して、当該ビデオ画面内の対応する目標対象の年齢を予測することができる。目標対象の魅力値、表情、笑顔値などの属性特徴の検出方法は、目標対象の年齢の検出方法と同様であり得、ここでは繰り返して説明しないが、互いに異なる属性特徴を予測するときに適用されるニューラルネットワークモデルは互いに異なっており、異なるニューラルネットワークモデルのトレーニング過程も異なることを説明する必要がある。
目標対象の属性特徴が年齢、魅力値、表情、笑顔値の中の複数の特徴を含む場合、1つのニューラルネットワークモデルを利用してビデオ画面内の目標ユーザの複数の特徴を予測することができ、当該ニューラルネットワークモデルをトレーニングするときに、その教師ありデータのラベルは複数の特徴ラベルである必要があることを説明する必要がある。
目標対象の観覧持続時間の確定方法は、教室シナリオで学生の注目持続時間の確定方法と同一であることができ、ここでは繰り返して説明しない。
目標対象の状態(たとえば姿勢、顔部の表情など)が絶えず変化される可能性があることを考慮すると、目標対象の属性特徴も変化される可能性がある。たとえば、目標対象が顔部の表情を変更すると、検出された目標対象の表情、笑顔値、魅力値なども変化されることになる。
可能な1実施形態において、目標対象の属性特徴に変化が発生されたことが検出された場合、さらに、第1表示エリア内の第2展示対象が当該属性特徴の変化に従って展示状態を変換するように制御することができる。例示的に、第2展示対象は、図4に示したように、各目標対象の周囲に展示フレームが展示されていてもよい。展示フレーム内には、目標対象の身分、年齢、魅力値、表情、観覧持続時間、および、笑顔値の中の少なくとも1つが展示されてもよく、展示フレームの表示位置は、目標対象の周辺の固定位置であり得る。たとえば、目標対象の体のキーポイントを検出し、続いて体のキーポイントに基づいて展示位置を確定し、さらに当該目標対象に対応する展示フレームを展示することができる。
上記の解決策において、目標対象属性特徴に対応する第2展示対象を展示することによって、互いに異なる目標対象に対するパーソナライズされた展示を実現することができ、互いに異なる目標対象の展示要件を満たすことができる。
状況3において、ビデオ画面内に目標対象が含まれていることが検出された場合、表示スクリーンの第2表示エリア内に目標対象のチェックイン情報を展示することができる。
関連技術において、行事を開催するときに出席者の情報を統計する必要がある場合、サインインフォームへの署名、身分情報の入力など、専門スタッフが手動で統計することがよくあり、操作が煩雑で、チェックインの効率より低い。
いくつかの実施例において、目標対象は、予定した出席者であり得る。たとえば、アプリケーションシナリオがある会議であると、目標対象は予め決定された参加者であり得る。
可能な1実施形態において、目標対象の生物特徴(たとえば顔の特徴、歩行特徴、REID特徴など)を予め入力することができる。ビデオ画面を取得した後に、ビデオ画面内の各々の対象の生物特徴を検出し、検出された生物特徴と予め入力された生物特徴とを比較して、比較結果が成功した対象を目標対象として確定する。
第2表示エリア内には目標対象のチェックイン情報が展示されていてもよく、チェックイン情報は、たとえば、目標対象の写真および/または目標対象の身分情報を含み得る。ビデオ画面内に目標対象が含まれていることが検出された後に、第2表示エリア内の目標対象のチェックイン情報の展示状態を変更することができる。
いくつかの実施例において、チェックイン情報は、第2表示エリア内で情報カードの形で展示され得、各情報カード内には、目標対象の写真および/または目標対象の身分情報が展示され得る。チェックイン情報の展示状態を変更する場合、情報カードの背景色を変更することができる。または、チェックイン情報の展示状態を変更する前の情報カードの色を、灰色にすることができる。チェックイン情報の展示状態を変更する方式は、情報カードなどを点灯することであり得る。
他の可能な1実施形態において、第1表示エリア内の展示対象が展示状態を変換するように制御するときに、変換後の展示状態が目標展示状態であることが検出された場合、さらに、第2表示エリア内に展示された目標対象のチェックイン情報をマークすることができる。
例示的に、第1表示エリア内の展示対象が花の特殊効果であると、花の特殊効果の横に「笑顔しながらVIPになる」というプロンプト文を展示し得る。目標対象の笑顔を検出した後に、花の特殊効果の色が変更されるように制御し、すなわち展示対象の展示状態を目標展示状態に変更する。このとき、第2表示エリア内の対応する目標対象のチェックイン情報に、マークを追加することができ、たとえば第2表示エリア内の目標対象のチェックイン情報に「VIP」印を追加することができる。
ここで、目標対象のチェックイン情報の展示状態を変更する前に、チェックイン情報に含まれている写真は、データベースに予め保存されている写真であり得る。チェックイン情報をマークするときに、さらに、ビデオ画面内で目標対象の1枚の写真をカッティングし、カッティングした写真を利用してチェックイン情報中の目標対象の写真を置き換えることができる。カッティングした写真は、ランダムにカッティングしたものであってもよいし、解像度が一番高い1フレームのビデオ画像からカッティングしたものであってもよい。
可能な1実施形態において、第2表示エリア内の位置は限られているが、目標対象の数は複数である。このような場合、目標対象のチェックイン情報をスクロール表示するか、または、目標対象のチェックイン情報にマークを追加した後の一定の時間の後に、第2表示エリア内に当該目標対象のチェックイン情報を表示しないことができる。
上記の解決策に基づいて、目標対象の自動チェックインを実現して、チェックインステップを簡素化し、チェックイン効率を向上させることができる。目標対象のチェックイン情報をマークすることによって、チェックイン情報の展示方式を豊富にし、展示状態が目標展示状態である目標対象と展示状態が目標展示状態ではない目標対象とを区分することができる。
状況4において、ビデオ画面に目標対象が含まれていることが検出された場合、表示スクリーンの第3表示エリア内に目標対象の記述情報を展示することができる。
目標対象の記述情報は、目標対象の属性情報、および、ビデオ画面からカッティングした目標対象の顔画像であり得る。
異なるシナリオにおいて、目標対象の属性情報は異なってもよく、たとえば、教室シナリオにおいては、目標対象の属性情報は、学生ID、性別、年齢、授業回数などを含み得るが、展示会、ショッピングモールなどの公共の場所においては、目標対象の属性情報は、身分識別子、性別、訪問回数、滞在持続時間などを含み得る。
第3表示エリア内に展示できる目標対象の記述情報は、限られている。たとえば、第3表示エリアには、N個の目標対象の記述情報のみを展示することができ、ビデオ画面内に含まれた目標対象の数がN以下である場合、第3表示エリア内にすべての目標対象の記述情報を展示することができ、ビデオ画面内に含まれた目標対象の数がNよりも大きい場合は、たとえばビデオ画面内にN+1個の目標対象が含まれていると、最初に展示された目標対象の記述情報を削除し、最新のN+1番目にビデオ画面内で出現された目標対象の記述情報を展示することができ、ここで、Nは正の整数である。
本発明の可能な1実施形態において、第3表示エリアに、ビデオ画面内で出現された前のM個の目標対象の記述情報のみを展示し、ビデオ画面内のM番目以後に出現された目標対象の記述情報を展示しないことができ、ここで、Mは正の整数である、MとNとは、等しくても等しくなくてもかまわない。または、特定の属性特徴を満たす前のM個の目標対象の記述情報を展示してもよい。
第1表示エリア内の展示対象が展示状態を変換するように制御するときに、変換後の展示状態が目標展示状態であることが検出された場合、第3表示エリア内に展示された目標対象の記述情報をマークすることができる。
例示的に、ビデオ画面内に目標対象が含まれていることが検出された後に、対応する位置に花の特殊効果および「笑顔しながらVIPになる」のプロンプト文を展示することができる。目標対象の笑顔が検出された後に、花の特殊効果の色を変更し(すなわち第1表示エリア内の展示対象の展示状態を目標展示状態に変更する)、続いて第3表示エリア内に展示された目標対象の記述情報に「VIP」のマークを追加し、さらに、記述情報の背景色を初期色から目標色に変更することができる。
上記の解決策において、目標対象の記述情報を展示し、展示対象の展示状態を目標展示状態に変換した後に、記述情報にマークを追加することによって、記述情報の展示方式を豊富にし、ユーザとの間のインタラクションを向上させた。
状況5において、ビデオ画面内に目標対象が含まれていることが検出された場合、表示スクリーンの第4表示エリアにビジネスコンテンツを展示することができる。
ここで、第4表示エリアに展示されるビジネスコンテンツは、たとえば、広告、販促ビデオ、または、場所紹介情報などであり得、ビジネスコンテンツの形態は、写真、テキスト、オーディオ、ビデオなどに限定されない。
ビデオ画面内の目標対象に対する累積検出結果に基づいて、表示スクリーン内の展示対象が展示状態を変更するように制御することは、ビデオ画面内の目標対象の姿態が第1姿態から第2姿態に切り替えたことが検出された場合、第4表示エリア内に展示されたビジネスコンテンツを第1ビジネスコンテンツから第2ビジネスコンテンツに切り替えるように制御することを含み得る。
ここで、目標対象の現在の姿態は、第1姿態であり、予め設定された姿態は、第2姿態である。第4表示エリアに現在展示されたビジネスコンテンツは、第1ビジネスコンテンツであり、第1ビジネスコンテンツ以外の他のビジネスコンテンツは、第2ビジネスコンテンツである。
第4表示エリア内に、目標対象が第2姿態をとることでビジネスコンテンツを切り替えるように指示するための、プロンプト文を表示することができ、例示的に、プロンプト文は、「手を振って展示コンテンツを切り替えてください」であり得る。目標対象の現在の姿態は、第1姿態であり、目標対象が手を振った動作が検出された場合、すなわち目標対象が第1姿態から第2姿態に切り替えたことが検出された場合、第4表示エリア内に展示されたビジネスコンテンツを切り替えるように制御する。
上記の解決策において、目標対象の姿態の変化が検出された場合、第4表示エリア内に展示されたビジネスコンテンツを切り替えるように制御することができる。このようにすることによって、目標対象との間のインタラクションを向上させ、ビジネスコンテンツの切り替え方式を豊富にした。
状況6において、ビデオ画面内に少なくとも1つの目標対象が含まれていることが検出された場合、表示スクリーンの第5表示エリアに少なくとも1つの目標対象の特徴分布情報を展示することができる。
ここで、特徴分布情報は、年齢分布、性別分布、出席延べ分布、人気経路分布、エリア群衆密度分布などを含み得るが、これらに限定されない。
ここで、特徴分布情報が人気経路分布を含む場合、電子デバイスは、複数の撮影装置と接続されることができ(その接続方式は有線接続または無線接続であり得る)、まず各々の目標対象の移動経路を確定し、続いて複数の移動経路から人気経路を選別して展示することができる。
ここで、図5に示したように、目標対象の移動経路を確定する方法は、ステップS501~S504を含み得る。
S501において、第1撮影装置の収集データを取得し、収集データは収集した顔画像および第1撮影装置の識別子情報を含む。
S502において、第1撮影装置の識別子情報に対応する位置記述情報を取得する。
S503において、第1撮影装置の位置記述情報に基づいて、顔画像識別子の目標対象の移動データを確定する。
S504において、移動データを利用して目標対象の移動経路を確定する。
具体的に、第1撮影装置は、現在目標対象を撮影した撮影装置であり得、第1撮影装置の収集データは、顔画像の収集時間をさらに含み得る。前記収集時間の前の所定の時間帯内で既に前記目標対象の過去移動データが得られたことが検出された場合、前記第1撮影装置の位置記述情報に基づいて前記過去移動データを更新することによって、前記移動データを得ることができる。前記収集時間の前の所定の時間帯内で前記目標ユーザの過去移動データが得られなかったことが検出された場合、前記第1撮影装置の位置記述情報を前記移動データとして使用することができる。過去移動データは、少なくとも1つの第2撮影装置の位置記述情報を含み、ここで、第2撮影装置は、収集時間の前の所定の時間帯内で目標対象の顔画像を収集した撮影装置である。
可能な1実施形態において、前記ビデオ画面内の目標対象に対する累積検出結果に基づいて、表示スクリーン内の前記展示対象が展示状態を変換するように制御することは、少なくとも1つの目標対象に対する累積検出結果に基づいて、第5表示エリア内に展示されている特徴分布情報を更新するように制御することを含み得る。
例示的に、特徴分布情報が性別分布を含み、現在ビデオ画面内に5人の男性目標対象および2人の女性目標対象が含まれていると、展示された特徴分布情報に男と女の比率が5:2であることを表示するか、または、性別分布を展示するときに、円グラフの形で展示することができ、本発明の実施例はその展示方式に対して限定しない。
上記の方式において、第5表示エリア内の特徴分布情報を展示し、また更新することによって、ビデオ画面内の目標対象に対する統計および分析を実現することができる。
例示的に、ビデオ画面内に目標対象が含まれていることが検出された場合、目標対象に関連された展示対象を展示するときに上記の状況1~状況6が同時に含まれていると、表示スクリーン内の各表示エリアの分布状況は、図6に示したようである。ここで、第1表示エリアと第4表示エリアとは同じエリアであり得、すなわち、取得したビデオ画面の展示、第1展示対象の展示、および、ビジネスコンテンツの展示は、異なる展示モードである。
第1表示エリアと第4表示エリアとが異なるエリアである場合、すなわち、表示スクリーン内でビデオ画面とビジネスコンテンツとを同時に展示する場合、表示スクリーン内の各表示エリアの例示的な分布状況は、図7に示したようである。
当業者は、具体的な実施形態の上記の方法において、各ステップの説明順序は、厳密な実行順序を意味して実施過程に対する制限を構成するのではなく、各ステップの具体的な実行順序は、その機能および可能の内部ロジックによって決定されるべきであることを理解できる。
本発明の実施例は、同じ概念に基づいて、展示対象制御装置をさらに提供する。図8は、本発明の実施例によって提供される展示対象制御装置の構成を示す模式図である。当該装置は、第1展示モジュール801と、第2展示モジュール802と、制御モジュール803と、を備える。
第1展示モジュール801は、取得したビデオ画面を表示スクリーンに展示する。
第2展示モジュール802は、前記ビデオ画面内に目標対象が含まれていることが検出された場合、前記目標対象に関連された展示対象を前記表示スクリーンに展示する。
制御モジュール803は、前記ビデオ画面内の前記目標対象に対する累積検出結果に基づいて、前記表示スクリーン内の前記展示対象が展示状態を変換するように制御する。
可能な1実施形態において、前記第2展示モジュール802は、前記ビデオ画面内に前記目標対象が含まれていることが検出された場合、前記表示スクリーンの第1表示エリア内に初期展示状態の第1展示対象を展示することができ、ここで、前記初期展示状態は、前記目標対象が目標姿態をとるようにプロンプトするために用いられる。
可能な1実施形態において、前記制御モジュール803は、前記ビデオ画面内の前記目標対象がとった前記目標姿態を検出し、前記目標対象がとった前記目標姿態の累積時間または累積回数に基づいて、前記第1表示エリア内の前記第1展示対象が展示状態を変換するように制御することができる。
可能な1実施形態において、前記制御モジュール803は、前記累積時間または累積回数が所定の値に達していない場合、前記第1展示対象が展示状態を中間展示状態に変換するように制御することができ、ここで、前記中間展示状態は、前記累積時間または累積回数の累積値に従って変化することによって、前記累積値を示す。
可能な1実施形態において、前記制御モジュール803は、前記累積時間または累積回数が所定の値に達した場合、前記第1展示対象が展示状態を第1目標展示状態に変換するように制御ことによって、前記目標対象がとった前記目標姿態が既に所定の条件を満たしたことを示すことができる。
可能な1実施形態において、前記第2展示モジュール802は、前記ビデオ画面内の前記目標対象の属性特徴を検出し、前記表示スクリーンの第1表示エリア内に前記属性特徴に対応する第2展示対象を展示することができる。
可能な1実施形態において、前記制御モジュール803は、前記目標対象の目標属性特徴に変化が発生されたことが検出された場合、前記第1表示エリア内の前記第2展示対象が前記属性特徴の変化に従って展示状態を変換するように制御することができる。
可能な1実施形態において、前記第2展示対象は、前記目標対象の身分識別子、年齢値、笑顔値、魅力値、観覧持続時間、各種類の感情の持続時間、注目持続時間の中の少なくとも1つを含む。
可能な1実施形態において、前記第2展示モジュール802は、前記ビデオ画面内に前記目標対象が含まれていることが検出された場合、前記表示スクリーンの第2表示エリア内に前記目標対象のチェックイン情報を展示することができる。
可能な1実施形態において、前記制御モジュール803は、さらに、前記表示スクリーンの第1表示エリア内の前記展示対象が展示状態を変換するように制御するときに、変換後の展示状態が目標展示状態であることが検出された場合、前記第2表示エリア内に展示された前記目標対象のチェックイン情報をマークすることができる。
可能な1実施形態において、前記第2展示モジュール802は、前記ビデオ画面内に前記目標対象が含まれていることが検出された場合、前記表示スクリーンの第3表示エリア内に前記目標対象の記述情報を展示することができる。
可能な1実施形態において、前記制御モジュール803は、さらに、前記表示スクリーンの第1表示エリア内の前記展示対象が展示状態を変換するように制御するときに、変換後の展示状態が目標展示状態であることが検出された場合、前記第3表示エリア内に展示された前記目標対象の記述情報をマークすることができる。
可能な1実施形態において、前記第2展示モジュール803は、前記ビデオ画面内に前記目標対象が含まれていることが検出された場合、前記表示スクリーンの第4表示エリア内にビジネスコンテンツを展示することができる。
可能な1実施形態において、前記制御モジュール803は、前記ビデオ画面内の前記目標対象の姿態が第1姿態から第2姿態に切り替えたことが検出された場合、前記第4表示エリア内に展示された前記ビジネスコンテンツを第1ビジネスコンテンツから第2ビジネスコンテンツに切り替えるように制御することができる。
可能な1実施形態において、前記第2展示モジュール802は、前記ビデオ画面内に少なくとも1つの前記目標対象が含まれていることが検出された場合、前記表示スクリーンの第5表示エリア内に少なくとも1つの前記目標対象の特徴分布情報を展示することができる。
可能な1実施形態において、前記制御モジュール803は、少なくとも1つの前記目標対象に対する累積検出結果に基づいて、前記第5表示エリア内に展示された前記特徴分布情報を更新するように制御することができる。
いくつかの実施例において、本発明の実施例によって提供される装置に含まれる機能またはテンプレートを使用して、上記の方法の実施例に記述された方法を実行することができ、その具体的な実装は上記の方法の実施例の記述を参照することができ、簡潔化のために、ここでは繰り返して説明しない。
本発明の実施例は、同じ技術的概念に基づいて、電子デバイスをさらに提供する。図9に示したように、前記電子デバイスは、プロセッサ901と、メモリ902と、バス903とを備えることができる。ここで、メモリ902は、内部メモリ9021と外部メモリ9022とを備える。ここでの内部メモリ9021は、メモリとも呼ばれ、プロセッサ901中の計算データ、および、ハードディスクなどの外部メモリ9022と交換するデータ一時的に格納し、プロセッサ901hs、内部メモリ9021を介して外部メモリ9022とデータ交換を実行する。電子デバイス900が運行されるときに、プロセッサ901とメモリ902との間はバス903を介して通信する。前記メモリ902には、前記プロセッサ901によって実行可能な機械可読命令が記憶されており、当該機械可読命令がプロセッサ901によって実行されると、前記プロセッサ901が上記の任意の移動状態情報展示方法を実現するようにする。
ここで、プロセッサ901が実行する具体的な処理過程は、上記の方法の実施例での記述を参照することができ、ここでは再度説明しない。
なお、本発明の実施例は、コンピュータプログラムが格納されているコンピュータ可読記録媒体をさらに提供し、当該コンピュータプログラムがプロセッサによって実行されると、前記プロセッサが上記の任意の展示対象制御方法を実現するようにする。
本発明の実施例によって提供される展示対象制御方法のコンピュータプログラム製品は、プログラムコードが格納されたコンピュータ可読記録媒体を含み、前記プログラムコードに含まれた命令は、上記の方法の実施例に記載の展示対象制御方法のステップを実行することができ、具体的には上記の方法の実施例を参照することができ、ここで繰り返して説明しない。
当業者は、上記のシステムおよび装置の具体的な作業過程は、方法の実施例での過程を参考することができ、記述の便宜及び簡潔化のために、ここでは繰り返して説明しないことを明確に理解することができる。本発明によって提供される実施例で開示されるシステム、装置、および、方法は、その他の方式によって実現できることを理解すべきである。上記の装置の実施例は、単に模式的なものである。たとえば、前記ユニットの分割は、論理機能の分割に過ぎず、実際の実装では、他の分割方法があり得る。また、たとえば、複数のユニットまたは構成要素は、組み合わされたり、別のシステムに統合されたり、一部の特徴が忽略されたり実行されなかったりする場合がある。さらに、表示または議論された互いに結合または直接結合または通信接続は、いくつかの通信インターフェース、デバイスまたはユニットの間接結合または通信接続を介することができ、電気的、機械的または他の形態であり得る。
前記の分離部品として説明されたユニットは、物理的に分離されている場合と物理的に分離されていない場合があり、ユニットとして表示される部品は、物理ユニットである場合とそうでない場合がある。1つの場所に配置されることも、複数のネットワークユニットに分散させることもできる。ユニットのいくつかまたはすべては、本開示の実施例の目的を達成するための実際の必要性に従って選択され得る。
また、本発明の各実施例での各機能ユニットは、1つの処理ユニットに統合され得るか、または各ユニットが物理的に単独で存在し得るか、または2つ以上のユニットが1つのユニットに統合され得る。
前記機能がソフトウェア機能ユニットの形で実装され、独立した製品として販売または使用される場合、1つのプロセッサによって実行可能な不揮発性のコンピュータ可読取記録媒体に格納されることができる。このような理解に基づいて、本発明の実施例は、本質的にソフトウェア製品の形態で具体化されるか、または、先行技術に寄与する部分または実施形態の一部がソフトウェア製品の形態で具体化されることができる。当該コンピュータソフトウェア製品は、記録媒体に格納され、パーソナルコンピュータ、サーバ、またはネットワークデバイスなどのコンピュータデバイスに、以下の様々な実施形態に記載された方法のステップのすべてのまたは一部を実行させるためのいくつかの命令を含む。前述した記録媒体は、Uディスク、移動ハードディスク、読み取り専用メモリ(Read-Only Memory、ROM)、ランダムアクセスメモリ(Random Access Memory、RAM)、磁気ディスクまたは光学ディスクなどの、プログラムコードを格納できる様々な媒体を含む。
上記は本発明のいくつかの実施形態にすぎないし、本発明の保護範囲はそれに限定されない。本開示に基づいて当業者が容易に想像することができる変更または置換は、本開示の範囲内に含まれるものとする。したがって、本開示の範囲は、特許請求の範囲によって決定される。

Claims (34)

  1. 展示対象制御方法であって、
    取得したビデオ画面を表示スクリーンに展示することと、
    前記ビデオ画面内に目標対象が含まれていることが検出された場合、前記目標対象に関連された展示対象を前記表示スクリーンに展示することと、
    前記ビデオ画面内の前記目標対象に対する累積検出結果に基づいて、前記表示スクリーン内の前記展示対象が展示状態を変換するように制御することと、を含む
    ことを特徴とする展示対象制御方法。
  2. 前記ビデオ画面内に目標対象が含まれていることが検出された場合、前記目標対象に関連された展示対象を前記表示スクリーンに展示することは、
    前記ビデオ画面内に前記目標対象が含まれていることが検出された場合、前記表示スクリーンの第1表示エリア内に初期展示状態の第1展示対象を展示することを含み、
    前記初期展示状態は、前記目標対象が目標姿態をとるようにプロンプトするために用いられる
    ことを特徴とする請求項1に記載の展示対象制御方法。
  3. 前記ビデオ画面内の前記目標対象に対する累積検出結果に基づいて、前記表示スクリーン内の前記展示対象が展示状態を変換するように制御することは、
    前記ビデオ画面内の前記目標対象がとった前記目標姿態を検出することと、
    前記目標対象がとった前記目標姿態の累積時間または累積回数に基づいて、前記第1表示エリア内の前記第1展示対象が展示状態を変換するように制御することと、を含む
    ことを特徴とする請求項2に記載の展示対象制御方法。
  4. 前記目標対象がとった前記目標姿態の累積時間または累積回数に基づいて、前記第1表示エリア内の前記第1展示対象が展示状態を変換するように制御することは、
    前記累積時間または累積回数が所定の値に達していない場合、前記第1展示対象が展示状態を中間展示状態に変換するように制御することを含み、
    前記中間展示状態は、前記累積時間または累積回数の累積値に従って変化することによって、前記累積値を示す
    ことを特徴とする請求項3に記載の展示対象制御方法。
  5. 前記目標対象がとった前記目標姿態の累積時間または累積回数に基づいて、前記第1表示エリア内の前記第1展示対象が展示状態を変換するように制御することは、
    前記累積時間または累積回数が所定の値に達した場合、前記第1展示対象が展示状態を第1目標展示状態に変換するように制御ことによって、前記目標対象がとった前記目標姿態が既に所定の条件を満たしたことを示すようにすることを含む
    ことを特徴とする請求項3に記載の展示対象制御方法。
  6. 前記ビデオ画面内に目標対象が含まれていることが検出された場合、前記目標対象に関連された展示対象を前記表示スクリーンに展示することは、
    前記ビデオ画面内に前記目標対象が含まれていることが検出された場合、前記ビデオ画面内の前記目標対象の属性特徴を検出することと、
    前記表示スクリーンの第1表示エリア内に前記属性特徴に対応する第2展示対象を展示することと、を含む
    ことを特徴とする請求項1に記載の展示対象制御方法。
  7. 前記ビデオ画面内の前記目標対象に対する累積検出結果に基づいて、前記表示スクリーン内の前記展示対象が展示状態を変換するように制御することは、
    前記目標対象の属性特徴に変化が発生されたことが検出された場合、前記第1表示エリア内の前記第2展示対象が前記属性特徴の変化に従って展示状態を変換するように制御することと、を含む
    ことを特徴とする請求項6に記載の展示対象制御方法。
  8. 前記第2展示対象は、
    前記目標対象の身分識別子、年齢値、笑顔値、魅力値、観覧持続時間、各種類の感情の持続時間、注目持続時間の中の少なくとも1つを含む
    ことを特徴とする請求項6または7に記載の展示対象制御方法。
  9. 前記ビデオ画面内に前記目標対象が含まれていることが検出された場合、前記目標対象に関連された展示対象を前記表示スクリーンに展示することは、
    前記ビデオ画面内に前記目標対象が含まれていることが検出された場合、前記表示スクリーンの第2表示エリア内に前記目標対象のチェックイン情報を展示することを含む
    ことを特徴とする請求項1乃至8の中のいずれか1項に記載の展示対象制御方法。
  10. 前記表示スクリーンの第1表示エリア内の前記展示対象が展示状態を変換するように制御するときに、変換後の展示状態が目標展示状態であることが検出された場合、前記第2表示エリア内に展示された前記目標対象のチェックイン情報をマークすることをさらに含む
    ことを特徴とする請求項9に記載の展示対象制御方法。
  11. 前記ビデオ画面内に目標対象が含まれていることが検出された場合、前記目標対象に関連された展示対象を前記表示スクリーンに展示することは、
    前記ビデオ画面内に前記目標対象が含まれていることが検出された場合、前記表示スクリーンの第3表示エリア内に前記目標対象の記述情報を展示することを含む
    ことを特徴とする請求項1乃至10の中のいずれか1項に記載の展示対象制御方法。
  12. 前記表示スクリーンの第1表示エリア内の前記展示対象が展示状態を変換するように制御するときに、変換後の展示状態が目標展示状態であることが検出された場合、前記第3表示エリア内に展示された前記目標対象の記述情報をマークすることをさらに含む
    ことを特徴とする請求項11に記載の展示対象制御方法。
  13. 前記ビデオ画面内に前記目標対象が含まれていることが検出された場合、前記目標対象に関連された展示対象を前記表示スクリーンに展示することは、
    前記ビデオ画面内に前記目標対象が含まれていることが検出された場合、前記表示スクリーンの第4表示エリア内にビジネスコンテンツを展示することを含む
    ことを特徴とする請求項1乃至12の中のいずれか1項に記載の展示対象制御方法。
  14. 前記ビデオ画面内の前記目標対象に対する累積検出結果に基づいて、前記表示スクリーン内の前記展示対象が展示状態を変換するように制御することは、
    前記ビデオ画面内の前記目標対象の姿態が第1姿態から第2姿態に切り替えたことが検出された場合、前記第4表示エリア内に展示された前記ビジネスコンテンツを第1ビジネスコンテンツから第2ビジネスコンテンツに切り替えるように制御することを含む
    ことを特徴とする請求項13に記載の展示対象制御方法。
  15. 前記ビデオ画面内に前記目標対象が含まれていることが検出された場合、前記目標対象に関連された展示対象を前記表示スクリーンに展示することは、
    前記ビデオ画面内に少なくとも1つの前記目標対象が含まれていることが検出された場合、前記表示スクリーンの第5表示エリア内に少なくとも1つの前記目標対象の特徴分布情報を展示することを含む
    ことを特徴とする請求項1乃至14の中のいずれか1項に記載の展示対象制御方法。
  16. 前記ビデオ画面内の前記目標対象に対する累積検出結果に基づいて、前記表示スクリーン内の前記展示対象が展示状態を変換するように制御することは、
    少なくとも1つの前記目標対象に対する累積検出結果に基づいて、前記第5表示エリア内に展示された前記特徴分布情報を更新するように制御することを含む
    ことを特徴とする請求項15に記載の展示対象制御方法。
  17. 展示対象制御装置であって、
    取得したビデオ画面を表示スクリーンに展示するための第1展示モジュールと、
    前記ビデオ画面内に目標対象が含まれていることが検出された場合、前記目標対象に関連された展示対象を前記表示スクリーンに展示するための第2展示モジュールと、
    前記ビデオ画面内の前記目標対象に対する累積検出結果に基づいて、前記表示スクリーン内の前記展示対象が展示状態を変換するように制御するための制御モジュールと、を備える
    ことを特徴とする展示対象制御装置。
  18. 前記第2展示モジュールは、前記ビデオ画面内に前記目標対象が含まれていることが検出された場合、前記表示スクリーンの第1表示エリア内に初期展示状態の第1展示対象を展示し、
    前記初期展示状態は、前記目標対象が目標姿態をとるようにプロンプトするために用いられる
    ことを特徴とする請求項17に記載の展示対象制御装置。
  19. 前記制御モジュールは、
    前記ビデオ画面内の前記目標対象がとった前記目標姿態を検出し、
    前記目標対象がとった前記目標姿態の累積時間または累積回数に基づいて、前記第1表示エリア内の前記第1展示対象が展示状態を変換するように制御する
    ことを特徴とする請求項18に記載の展示対象制御装置。
  20. 前記制御モジュールは、
    前記累積時間または累積回数が所定の値に達していない場合、前記第1展示対象が展示状態を中間展示状態に変換するように制御し、
    前記中間展示状態は、前記累積時間または累積回数の累積値に従って変化することによって、前記累積値を示す
    ことを特徴とする請求項19に記載の展示対象制御装置。
  21. 前記制御モジュールは、
    前記累積時間または累積回数が所定の値に達した場合、前記第1展示対象が展示状態を第1目標展示状態に変換するように制御ことによって、前記目標対象がとった前記目標姿態が既に所定の条件を満たしたことを示す
    ことを特徴とする請求項19に記載の展示対象制御装置。
  22. 前記第2展示モジュールは、
    前記ビデオ画面内に前記目標対象が含まれていることが検出された場合、前記ビデオ画面内の前記目標対象の属性特徴を検出し、
    前記表示スクリーンの第1表示エリア内に前記属性特徴に対応する第2展示対象を展示する
    ことを特徴とする請求項17に記載の展示対象制御装置。
  23. 前記制御モジュールは、
    前記目標対象の目標属性特徴に変化が発生されたことが検出された場合、前記第1表示エリア内の前記第2展示対象が前記属性特徴の変化に従って展示状態を変換するように制御する
    ことを特徴とする請求項22に記載の展示対象制御装置。
  24. 前記第2展示対象は、
    前記目標対象の身分識別子、年齢値、笑顔値、魅力値、観覧持続時間、各種類の感情の持続時間、注目持続時間の中の少なくとも1つを含む
    ことを特徴とする請求項22または23に記載の展示対象制御装置。
  25. 前記第2展示モジュールは、
    前記ビデオ画面内に前記目標対象が含まれていることが検出された場合、前記表示スクリーンの第2表示エリア内に前記目標対象のチェックイン情報を展示する
    ことを特徴とする請求項17乃至24の中のいずれか1項に記載の展示対象制御装置。
  26. 前記制御モジュールは、さらに、
    前記表示スクリーンの第1表示エリア内の前記展示対象が展示状態を変換するように制御するときに、変換後の展示状態が目標展示状態であることが検出された場合、前記第2表示エリア内に展示された前記目標対象のチェックイン情報をマークする
    ことを特徴とする請求項25に記載の展示対象制御装置。
  27. 前記第2展示モジュールは、
    前記ビデオ画面内に前記目標対象が含まれていることが検出された場合、前記表示スクリーンの第3表示エリア内に前記目標対象の記述情報を展示する
    ことを特徴とする請求項17乃至26の中のいずれか1項に記載の展示対象制御装置。
  28. 前記制御モジュールは、さらに、
    前記表示スクリーンの第1表示エリア内の前記展示対象が展示状態を変換するように制御するときに、変換後の展示状態が目標展示状態であることが検出された場合、前記第3表示エリア内に展示された前記目標対象の記述情報をマークする
    ことを特徴とする請求項27に記載の展示対象制御装置。
  29. 前記第2展示モジュールは、
    前記ビデオ画面内に前記目標対象が含まれていることが検出された場合、前記表示スクリーンの第4表示エリア内にビジネスコンテンツを展示する
    ことを特徴とする請求項17乃至28の中のいずれか1項に記載の展示対象制御装置。
  30. 前記制御モジュールは、
    前記ビデオ画面内の前記目標対象の姿態が第1姿態から第2姿態に切り替えたことが検出された場合、前記第4表示エリア内に展示された前記ビジネスコンテンツを第1ビジネスコンテンツから第2ビジネスコンテンツに切り替えるように制御する
    ことを特徴とする請求項29に記載の展示対象制御装置。
  31. 前記第2展示モジュールは、
    前記ビデオ画面内に少なくとも1つの前記目標対象が含まれていることが検出された場合、前記表示スクリーンの第5表示エリア内に少なくとも1つの前記目標対象の特徴分布情報を展示する
    ことを特徴とする請求項17乃至30の中のいずれか1項に記載の展示対象制御装置。
  32. 前記制御モジュールは、
    少なくとも1つの前記目標対象に対する累積検出結果に基づいて、前記第5表示エリア内に展示された前記特徴分布情報を更新するように制御する
    ことを特徴とする請求項31に記載の展示対象制御装置。
  33. 電子デバイスであって、
    プロセッサと、
    メモリ、
    前記メモリには、前記プロセッサによって実行可能な機械可読命令が格納されており、前記機械可読命令が前記プロセッサによって実行されると、前記プロセッサが、請求項1乃至16の中のいずれか1項に記載の展示対象制御方法を実現するようにする
    ことを特徴とする電子デバイス。
  34. コンピュータプログラムが格納されているコンピュータ可読記録媒体であって、
    当該コンピュータプログラムがプロセッサによって実行されると、前記プロセッサが、請求項1乃至16の中のいずれか1項に記載の展示対象制御方法を実現するようにする
    ことを特徴とするコンピュータ可読記録媒体。
JP2021527860A 2019-11-28 2020-07-24 展示対象制御方法、装置、電子デバイス、及び記録媒体 Pending JP2022515317A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201911190043.XA CN110968239B (zh) 2019-11-28 2019-11-28 一种展示对象的控制方法、装置、设备及存储介质
CN201911190043.X 2019-11-28
PCT/CN2020/104483 WO2021103610A1 (zh) 2019-11-28 2020-07-24 展示对象的控制方法与装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
JP2022515317A true JP2022515317A (ja) 2022-02-18

Family

ID=70031963

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021527860A Pending JP2022515317A (ja) 2019-11-28 2020-07-24 展示対象制御方法、装置、電子デバイス、及び記録媒体

Country Status (5)

Country Link
JP (1) JP2022515317A (ja)
KR (1) KR20210075188A (ja)
CN (1) CN110968239B (ja)
TW (1) TWI758837B (ja)
WO (1) WO2021103610A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110968239B (zh) * 2019-11-28 2022-04-05 北京市商汤科技开发有限公司 一种展示对象的控制方法、装置、设备及存储介质
CN111539339A (zh) * 2020-04-26 2020-08-14 北京市商汤科技开发有限公司 数据处理方法及装置、电子设备和存储介质
CN111857476B (zh) * 2020-07-17 2022-07-08 维沃移动通信有限公司 显示方法、装置及电子设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008264367A (ja) * 2007-04-24 2008-11-06 Nintendo Co Ltd トレーニングプログラムおよびトレーニング装置
JP2014042235A (ja) * 2012-07-24 2014-03-06 Takashi Hirabayashi 視聴率調査システム、並びに表情情報生成装置及び表情情報生成プログラム
JP2017211731A (ja) * 2016-05-24 2017-11-30 リズム時計工業株式会社 人数集計システム、人数集計方法、及び人数集計結果の閲覧方法
JP2018085597A (ja) * 2016-11-22 2018-05-31 パナソニックIpマネジメント株式会社 人物行動監視装置および人物行動監視システム

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5601045B2 (ja) * 2010-06-24 2014-10-08 ソニー株式会社 ジェスチャ認識装置、ジェスチャ認識方法およびプログラム
US9141197B2 (en) * 2012-04-16 2015-09-22 Qualcomm Incorporated Interacting with a device using gestures
US8542879B1 (en) * 2012-06-26 2013-09-24 Google Inc. Facial recognition
US11226686B2 (en) * 2014-01-20 2022-01-18 Lenovo (Singapore) Pte. Ltd. Interactive user gesture inputs
US9652801B2 (en) * 2015-07-16 2017-05-16 Countr, Inc. System and computer method for tracking online actions
US11736756B2 (en) * 2016-02-10 2023-08-22 Nitin Vats Producing realistic body movement using body images
CN107066983B (zh) * 2017-04-20 2022-08-09 腾讯科技(上海)有限公司 一种身份验证方法及装置
US10607035B2 (en) * 2017-08-31 2020-03-31 Yeo Messaging Ltd. Method of displaying content on a screen of an electronic processing device
CN108053700A (zh) * 2018-01-02 2018-05-18 北京建筑大学 一种人工智能教学辅助系统
CN110121117A (zh) * 2018-02-06 2019-08-13 优酷网络技术(北京)有限公司 视频结构化信息展示方法及装置
CN208141466U (zh) * 2018-05-17 2018-11-23 塔米智能科技(北京)有限公司 一种基于机器人的签到装置及系统
CN110968239B (zh) * 2019-11-28 2022-04-05 北京市商汤科技开发有限公司 一种展示对象的控制方法、装置、设备及存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008264367A (ja) * 2007-04-24 2008-11-06 Nintendo Co Ltd トレーニングプログラムおよびトレーニング装置
JP2014042235A (ja) * 2012-07-24 2014-03-06 Takashi Hirabayashi 視聴率調査システム、並びに表情情報生成装置及び表情情報生成プログラム
JP2017211731A (ja) * 2016-05-24 2017-11-30 リズム時計工業株式会社 人数集計システム、人数集計方法、及び人数集計結果の閲覧方法
JP2018085597A (ja) * 2016-11-22 2018-05-31 パナソニックIpマネジメント株式会社 人物行動監視装置および人物行動監視システム

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
AFFECTIVA サービス紹介, JPN6022031041, 3 September 2018 (2018-09-03), ISSN: 0004835390 *
AFFECTIVA 人の感情を認識するAI「AFFDEX」, JPN6022031042, 14 November 2018 (2018-11-14), ISSN: 0004835389 *
感情認識AI 心SENSORデモンストレーション, JPN6022031040, 12 July 2018 (2018-07-12), ISSN: 0004835391 *

Also Published As

Publication number Publication date
TW202121250A (zh) 2021-06-01
CN110968239A (zh) 2020-04-07
WO2021103610A1 (zh) 2021-06-03
TWI758837B (zh) 2022-03-21
CN110968239B (zh) 2022-04-05
KR20210075188A (ko) 2021-06-22

Similar Documents

Publication Publication Date Title
US20200320577A1 (en) Methods and systems for summarizing a visitor experience at a non-profit venue using multimedia recreations
JP2022515317A (ja) 展示対象制御方法、装置、電子デバイス、及び記録媒体
US10613699B2 (en) Multi-view display cueing, prompting, and previewing
CN109614849A (zh) 基于生物识别的远程教学方法、装置、设备及存储介质
Luvaas Unbecoming: The aftereffects of autoethnography
KR20210088601A (ko) 상태 인식 방법, 장치, 전자 디바이스 및 기록 매체
US20190045270A1 (en) Intelligent Chatting on Digital Communication Network
CN112446337A (zh) 一种基于表情识别的智慧博物馆管理系统
US20190297301A1 (en) Method and system for providing video call service
Vuolteenaho et al. Digital urbanisms: Exploring the spectacular, ordinary and contested facets of the media city.
KR102432158B1 (ko) 스포츠 이벤트 지원 플랫폼 서비스 제공 시스템
Masuda et al. Culture and the mind: implications for art, design and advertisement
Celiktutan et al. Computational analysis of affect, personality, and engagement in human–robot interactions
CN108170278A (zh) 沟通辅助方法及装置
KR20220165227A (ko) 디지털사이니지를 이용한 맞춤형 고객 대응 장치
Reichertz Automating security in and around soccer stadiums through camera systems? Report on a research project
Williams Collecting the revolution: British engagements with Chinese Cultural Revolution material culture
JP2018060375A (ja) 情報処理システム、情報処理装置およびプログラム
Adams et al. Media and Literacy: Learning in the Information Age--Issues, Ideas, and Teaching Strategies
Kasiran et al. Facial expression as an implicit customers' feedback and the challenges
Thovuttikul et al. Fairness in culturally dependent waiting behavior: Cultural influences on social communication in simulated crowds
KR102561198B1 (ko) 컨텐츠 활용 플랫폼 시스템, 증강현실 기반의 이미지 출력물 제작방법
Bussard Unfamiliar Streets: The Photographs of Richard Avedon, Charles Moore, Martha Rosler, and Philip-Lorca DiCorcia
Rodriguez " Hey, you! Get your damn hands off her!": Hegemonic masculinity and how it affects men's performance and perceptions among women cosplayers in popular culture conventions
Layiwola Transcultural Conversations: American and Nigerian Art in Dialogue

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210519

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210519

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220629

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220726

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20230228