JP7105380B2 - 情報処理システム及び方法 - Google Patents
情報処理システム及び方法 Download PDFInfo
- Publication number
- JP7105380B2 JP7105380B2 JP2021551172A JP2021551172A JP7105380B2 JP 7105380 B2 JP7105380 B2 JP 7105380B2 JP 2021551172 A JP2021551172 A JP 2021551172A JP 2021551172 A JP2021551172 A JP 2021551172A JP 7105380 B2 JP7105380 B2 JP 7105380B2
- Authority
- JP
- Japan
- Prior art keywords
- information processing
- heat map
- performer
- image
- person
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 98
- 238000000034 method Methods 0.000 title description 36
- 230000008921 facial expression Effects 0.000 claims description 60
- 230000005540 biological transmission Effects 0.000 claims description 45
- 238000004891 communication Methods 0.000 claims description 10
- 239000003086 colorant Substances 0.000 claims description 7
- 238000003672 processing method Methods 0.000 claims description 6
- 238000013507 mapping Methods 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 43
- 230000006870 function Effects 0.000 description 20
- 238000003384 imaging method Methods 0.000 description 20
- 238000001514 detection method Methods 0.000 description 13
- 230000008569 process Effects 0.000 description 11
- 238000006243 chemical reaction Methods 0.000 description 8
- 238000004364 calculation method Methods 0.000 description 7
- 230000008451 emotion Effects 0.000 description 4
- 230000014509 gene expression Effects 0.000 description 4
- 238000013135 deep learning Methods 0.000 description 3
- 239000004973 liquid crystal related substance Substances 0.000 description 3
- 238000010801 machine learning Methods 0.000 description 3
- 230000036760 body temperature Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000008961 swelling Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 238000005401 electroluminescence Methods 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
- G06V40/175—Static expression
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/001—Texturing; Colouring; Generation of texture or colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/20—Drawing from basic elements, e.g. lines or circles
- G06T11/206—Drawing of charts or graphs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/762—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using clustering, e.g. of similar faces in social networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/35—Categorising the entire scene, e.g. birthday party or wedding scene
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3179—Video signal processing therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20081—Training; Learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20084—Artificial neural networks [ANN]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
- G06T2207/30201—Face
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30232—Surveillance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30242—Counting objects in image
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Signal Processing (AREA)
- Evolutionary Computation (AREA)
- Artificial Intelligence (AREA)
- Computing Systems (AREA)
- Databases & Information Systems (AREA)
- Medical Informatics (AREA)
- Software Systems (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Quality & Reliability (AREA)
- Image Analysis (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Image Processing (AREA)
Description
大人数の観客を相手にパフォーマンスを行うパフォーマーは、観客の状況を確認しながら、自身が行うパフォーマンスの内容をコントロールする。パフォーマーの観客の状況を把握する能力は、経験に拠るところが大きい。また、経験豊富なパフォーマーであっても、観客の数が増えすぎると、全体を的確に把握することが困難になる。本実施の形態では、観客の状況を容易に把握できる情報処理システム及び方法を提供する。
図1は、本実施の形態の情報処理システムの概略構成を示す図である。
パフォーマー撮影装置100は、パフォーマー1を撮影する。パフォーマー1とは、パフォーマンスをする人物である。なお、ここでのパフォーマンスには、歌唱、演技及び演奏等の芸術的な表現行為に限定されず、広く演説及び講演等の行為も含まれる。すなわち、観客に対して、何らかの表現行為を行うことを意味する。
観客撮影装置200は、観客2を撮影する。観客撮影装置200は、一定位置から観客2の存在する観客エリア3を撮影して、観客を撮影する。観客2は、パフォーマー1によるパフォーマンスを見物(観覧、視聴、聴講等)する人物である。観客2の存在する観客エリア3は、規定のエリアの一例である。観客2は、規定のエリア内の人物の一例である。
情報処理装置300は、パフォーマー撮影装置100で撮影されたパフォーマーの画像及び観客撮影装置200で撮影された観客の画像を入力し、観客2の盛り上がり状況を表わすヒートマップを作成して、表示装置400に出力する。
表示装置400は、表示部の一例である。表示装置400は、情報処理装置300から出力されるヒートマップを表示する。表示装置400は、たとえば、液晶ディスプレイ(Liquid Crystal Display)、プラズマディスプレイ、有機ELディスプレイ(Organic ElectroLuminescence display, Organic Light Emitting Diode display)、電界放出ディスプレイ(Field Emission Display)、電子ペーパなどのフラットパネルディスプレイ、若しくは、プロジェクタとスクリーン(あるいはスクリーン同等物)で構成される。表示装置400は、パフォーマー1が視認可能な位置に設置される。
図11は、本実施の形態の情報処理システムによる情報処理の手順(情報処理方法)を示すフローチャートである。
本実施の形態の情報処理システムでは、クラスタリングしたヒートマップを出力する。クラスタリングしたヒートマップを出力する点以外は、上記第1の実施の形態の情報処理システムと同じである。したがって、以下においては、クラスタリングについてのみ説明する。
本実施の形態の情報処理システムでは、ヒートマップをクラスタリングして出力する場合において、ユーザー(たとえば、パフォーマー)が設定した発信力に基づいてクラスタ数が設定される。ユーザーが設定した発信力に基づいてクラスタ数が設定される点以外は、上記第2の実施の形態の情報処理システムと同じである。したがって、以下においては、相違点についてのみ説明する。
本実施の形態の情報処理システムでは、ヒートマップをクラスタリングして出力する場合において、ユーザー(たとえば、パフォーマー)が設定した発信力、及び、パフォーマーを撮影した画像から推定した発信力に基づいてクラスタ数が設定される。
上記のように、ヒートマップは、各観客の盛り上がり度を各観客の位置に対応付けて表示することにより作成される。各観客の位置は、観客撮影装置200によって撮影される画像から特定される。観客撮影装置200によって撮影される画像の視点は、パフォーマーの視点と異なる。本実施の形態の情報処理システムでは、ヒートマップの画像を異なる視点の画像に変換して提示する。すなわち、パフォーマーの視点の画像(パフォーマーの視点に近い画像)に変換して提示する。
本実施の形態の情報処理システムでは、ユーザー(たとえば、パフォーマー)からの指示に応じて、ヒートマップを反転させて提示する。すなわち、たとえば、ヒートマップが色で表示されている場合、色を反転させて提示する。また、たとえば、ヒートマップが、特定の色の濃淡で表示されている場合、その色の濃淡を反転させて提示する。
図24は、本実施の形態の情報処理システムの概略構成を示す図である。
[シーン認識に関して]
上記実施の形態では、パフォーマーを撮影した画像に基づいて、パフォーマンスのシーンを認識する構成としているが、その他の情報を利用して、パフォーマンスのシーンを認識することもできる。たとえば、音声又は音声及び画像の情報を利用して、シーンを認識する構成とすることもできる。この場合、パフォーマンスに伴う音声を集音する集音部が更に備えられる。
上記実施の形態では、観客の表情から盛り上がり度を算出する構成としているが、その他の情報も利用して、盛り上がり度を算出してもよい。たとえば、各観客が発する音声の情報、体の揺れの情報、体温の情報等を利用して、盛り上がり度を算出してもよい。この場合、各観客が発する音声を集音する集音部、各観客の体の揺れを検出するセンサ、各観客の体温を検出するセンサ等が備えられる。また、それらの情報を入力する入力部が備えられる。
上記実施の形態では、パフォーマーを撮影した画像に基づいて、パフォーマーが有する発信力を推定する構成としているが、その他の情報を利用して、発信力を推定することもできる。たとえば、パフォーマーが発する音声(声の大きさ、声質等)に基づいて、発信力を推定する構成とすることもできる。また、パフォーマーが発する音声と、パフォーマンスの画像の双方に基づいて、発信力を推定する構成とすることもできる。この場合、たとえば、パフォーマー撮影装置100は、音声付きの動画を撮影する。
パフォーマーの身に付けて使用される表示装置(いわゆるウェラブルデバイス)にヒートマップを表示する構成とすることもできる。たとえば、腕時計型、眼鏡型の表示装置にヒートマップを表示する構成とすることもできる。
情報処理装置の一部又は全部の機能は、各種のプロセッサ(processor)で実現できる。各種のプロセッサには、プログラムを実行して各種の処理部として機能する汎用的なプロセッサであるCPU(Central Processing Unit)、FPGA(Field Programmable Gate Array)などの製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス(Programmable Logic Device:PLD)、ASIC(Application Specific Integrated Circuit)などの特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路などが含まれる。プログラムは、ソフトウェアと同義である。
2 観客
3 観客エリア
10 情報処理システム
100 パフォーマー撮影装置
200 観客撮影装置
300 情報処理装置
301 CPU
302 ROM
303 RAM
304 HDD
305 操作部
307 入力インターフェース
308 出力インターフェース
311 第1画像入力部
312 第2画像入力部
313 シーン認識部
314 顔検出部
315 表情認識部
316 盛り上がり度算出部
317 ヒートマップ作成部
318 ヒートマップ出力部
321 発信力推定部
322 クラスタ数設定部
323 クラスタリング部
324 発信力入力部
331 画像処理部
400 表示装置
500 投影装置
F 検出した顔を囲う枠
HM ヒートマップ
HM0 ヒートマップ
HM1 変換処理したヒートマップ
HM2 反転処理したヒートマップ
I2 観客を撮影した画像
IF 観客の顔の画像
S11~S18 情報処理システムによる情報処理の手順
S21~S31 情報処理システムによる情報処理の手順
Claims (13)
- プロセッサと、
前記プロセッサに接続されたメモリと、
を備え、
前記プロセッサは、
パフォーマーを撮影した画像に基づいてシーンを認識する第1の認識を行い、
規定のエリア内の人物を撮影した画像に基づいて前記人物の表情を認識する第2の認識を行い、
前記シーンの認識結果及び前記人物の表情の認識結果に基づいて、前記シーンに応じた前記人物の状況指数を算出し、
前記人物の前記状況指数を前記エリア内での前記人物の位置に対応づけて表わしたヒートマップを作成し、
前記ヒートマップを出力する、
ように構成される、
情報処理システム。 - 前記プロセッサは、
前記パフォーマーが有する発信力に基づいて、クラスタ数を設定し、
設定されたクラスタ数に応じて、前記ヒートマップをクラスタリングし、
前記出力において、
クラスタリングされた前記ヒートマップを出力する、
ように更に構成される、
請求項1に記載の情報処理システム。 - 前記プロセッサは、
前記クラスタリングにおいて、
前記状況指数が閾値以上の前記人物のデータを対象に前記ヒートマップをクラスタリングする、
ように更に構成される、
請求項2に記載の情報処理システム。 - 前記プロセッサは、
前記パフォーマーを撮影した画像に基づいて、前記パフォーマーが有する前記発信力を推定する、
ように更に構成される、
請求項2又は3に記載の情報処理システム。 - 前記発信力には、前記パフォーマーが有する技量及び余力の少なくとも一方が含まれる、
請求項2から4のいずれか1項に記載の情報処理システム。 - 前記プロセッサは、
前記ヒートマップの画像を前記エリア内の前記人物を撮影した画像とは異なる視点の画像に変換する、
ように更に構成される、
請求項1から5のいずれか1項に記載の情報処理システム。 - 前記プロセッサは、
前記ヒートマップの色又は濃淡を反転させる、
ように更に構成される、
請求項1から6のいずれか1項に記載の情報処理システム。 - 前記プロセッサから出力された前記ヒートマップを表示するディスプレイを更に備えた、
請求項1から7のいずれか1項に記載の情報処理システム。 - 前記プロセッサから出力された前記ヒートマップを前記エリアに投影するプロジェクタを更に備えた、
請求項1から7のいずれか1項に記載の情報処理システム。 - 前記プロジェクタは、プロジェクションマッピングにより前記ヒートマップを前記エリアに投影する、
請求項9に記載の情報処理システム。 - 前記パフォーマーを撮影する第1カメラと、
前記エリア内の前記人物を撮影する第2カメラと、
を更に備えた、
請求項1から10のいずれか1項に記載の情報処理システム。 - パフォーマーを撮影し、
規定のエリア内の人物を撮影し、
前記パフォーマーを撮影した画像に基づいて、シーンを認識し、
前記エリア内の前記人物を撮影した画像に基づいて、前記人物の表情を認識し、
前記シーンの認識結果及び前記人物の表情の認識結果に基づいて、前記シーンに応じた前記人物の状況指数を算出し、
前記人物の前記状況指数を前記エリア内での前記人物の位置に対応づけて表わしたヒートマップを作成し、
前記ヒートマップを出力する、
情報処理方法。 - 前記パフォーマーが有する発信力の情報に基づいて、クラスタ数を設定し、
設定されたクラスタ数に応じて、前記ヒートマップをクラスタリングし、
前記ヒートマップの出力において、クラスタリングされた前記ヒートマップを出力する、
請求項12に記載の情報処理方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019180764 | 2019-09-30 | ||
JP2019180764 | 2019-09-30 | ||
PCT/JP2020/036173 WO2021065694A1 (ja) | 2019-09-30 | 2020-09-25 | 情報処理システム及び方法 |
Publications (3)
Publication Number | Publication Date |
---|---|
JPWO2021065694A1 JPWO2021065694A1 (ja) | 2021-04-08 |
JPWO2021065694A5 JPWO2021065694A5 (ja) | 2022-06-14 |
JP7105380B2 true JP7105380B2 (ja) | 2022-07-22 |
Family
ID=75338035
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021551172A Active JP7105380B2 (ja) | 2019-09-30 | 2020-09-25 | 情報処理システム及び方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US12087090B2 (ja) |
JP (1) | JP7105380B2 (ja) |
CN (1) | CN114450730A (ja) |
WO (1) | WO2021065694A1 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11023729B1 (en) * | 2019-11-08 | 2021-06-01 | Msg Entertainment Group, Llc | Providing visual guidance for presenting visual content in a venue |
CN118113890B (zh) * | 2024-04-10 | 2024-08-20 | 广东创森文化传媒有限公司 | 一种基于用户需求的传媒信息展示方法及系统 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007097047A (ja) | 2005-09-30 | 2007-04-12 | Seiko Epson Corp | コンテンツの編集装置、コンテンツの編集方法及びコンテンツの編集プログラム |
JP2011237970A (ja) | 2010-05-10 | 2011-11-24 | Nippon Hoso Kyokai <Nhk> | 顔表情変化度測定装置およびそのプログラム並びに番組興味度測定装置 |
WO2016009865A1 (ja) | 2014-07-18 | 2016-01-21 | ソニー株式会社 | 情報処理装置及び方法、表示制御装置及び方法、再生装置及び方法、プログラム、並びに情報処理システム |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20130100140A1 (en) * | 2011-10-25 | 2013-04-25 | Cywee Group Limited | Human body and facial animation systems with 3d camera and method thereof |
TWI511101B (zh) * | 2012-08-17 | 2015-12-01 | Active Learning Solutions Ltd | 供教室主動學習之方法與系統 |
US20140337328A1 (en) * | 2013-05-09 | 2014-11-13 | Veooz Labs Private Limited | System and method for retrieving and presenting concept centric information in social media networks |
JP2016012216A (ja) | 2014-06-27 | 2016-01-21 | Kddi株式会社 | 会議分析装置、方法及びプログラム |
US20160111019A1 (en) * | 2014-10-15 | 2016-04-21 | Kast Inc. | Method and system for providing feedback of an audio conversation |
US9936045B2 (en) * | 2014-12-04 | 2018-04-03 | International Business Machines Corporation | Quality of experience for communication sessions |
US10431116B2 (en) * | 2015-12-10 | 2019-10-01 | International Business Machines Corporation | Orator effectiveness through real-time feedback system with automatic detection of human behavioral and emotional states of orator and audience |
US10008089B2 (en) * | 2016-06-28 | 2018-06-26 | International Business Machines Corporation | Providing an alert to a person in a distressed situation |
US11769159B2 (en) * | 2017-11-13 | 2023-09-26 | Aloke Chaudhuri | System and method for human emotion and identity detection |
US11455599B2 (en) * | 2019-04-02 | 2022-09-27 | Educational Measures, LLC | Systems and methods for improved meeting engagement |
US11770422B2 (en) * | 2021-12-18 | 2023-09-26 | Zoom Video Communications, Inc. | Real-time engagement analytics for communication sessions |
-
2020
- 2020-09-25 WO PCT/JP2020/036173 patent/WO2021065694A1/ja active Application Filing
- 2020-09-25 JP JP2021551172A patent/JP7105380B2/ja active Active
- 2020-09-25 CN CN202080066650.XA patent/CN114450730A/zh active Pending
-
2022
- 2022-03-07 US US17/688,790 patent/US12087090B2/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007097047A (ja) | 2005-09-30 | 2007-04-12 | Seiko Epson Corp | コンテンツの編集装置、コンテンツの編集方法及びコンテンツの編集プログラム |
JP2011237970A (ja) | 2010-05-10 | 2011-11-24 | Nippon Hoso Kyokai <Nhk> | 顔表情変化度測定装置およびそのプログラム並びに番組興味度測定装置 |
WO2016009865A1 (ja) | 2014-07-18 | 2016-01-21 | ソニー株式会社 | 情報処理装置及び方法、表示制御装置及び方法、再生装置及び方法、プログラム、並びに情報処理システム |
Also Published As
Publication number | Publication date |
---|---|
CN114450730A (zh) | 2022-05-06 |
US20220189200A1 (en) | 2022-06-16 |
JPWO2021065694A1 (ja) | 2021-04-08 |
WO2021065694A1 (ja) | 2021-04-08 |
US12087090B2 (en) | 2024-09-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4474013B2 (ja) | 情報処理装置 | |
US10241990B2 (en) | Gesture based annotations | |
US8411130B2 (en) | Apparatus and method of video conference to distinguish speaker from participants | |
US10931919B2 (en) | Video conference system, video conference apparatus, and video conference method | |
US10705706B2 (en) | Methods and apparatus for multimedia presentation | |
US9324158B2 (en) | Image processing device for performing image processing on moving image | |
US20130177296A1 (en) | Generating metadata for user experiences | |
JP6655378B2 (ja) | 会議支援システム | |
JP4517716B2 (ja) | 会議記録装置、会議記録方法、設計方法およびプログラム | |
JP7105380B2 (ja) | 情報処理システム及び方法 | |
KR20140125183A (ko) | 프로젝터 장착 안경 및 그 제어 방법 | |
JP7512488B2 (ja) | 画像処理装置、画像処理方法及び画像処理システム | |
US10970932B2 (en) | Provision of virtual reality content | |
US11164341B2 (en) | Identifying objects of interest in augmented reality | |
WO2009119288A1 (ja) | コミュニケーションシステム及びコミュニケーションプログラム | |
WO2020234939A1 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
Ronzhin et al. | A software system for the audiovisual monitoring of an intelligent meeting room in support of scientific and education activities | |
JP2009232054A (ja) | 会議支援システム | |
TWI799048B (zh) | 環景影像會議系統及方法 | |
WO2023181808A1 (ja) | 情報処理装置、情報処理方法、及び、記録媒体 | |
US20220230469A1 (en) | Device and method for determining engagment of a subject | |
US20240331174A1 (en) | One Shot PIFu Enrollment | |
JP2024137355A (ja) | 端末装置 | |
GB2621868A (en) | An image processing method, device and computer program | |
CN118736265A (zh) | 一次性完成的PIFu登记 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220530 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220530 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20220530 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220622 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220711 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7105380 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |