JPWO2023276700A5 - - Google Patents

Download PDF

Info

Publication number
JPWO2023276700A5
JPWO2023276700A5 JP2023531788A JP2023531788A JPWO2023276700A5 JP WO2023276700 A5 JPWO2023276700 A5 JP WO2023276700A5 JP 2023531788 A JP2023531788 A JP 2023531788A JP 2023531788 A JP2023531788 A JP 2023531788A JP WO2023276700 A5 JPWO2023276700 A5 JP WO2023276700A5
Authority
JP
Japan
Prior art keywords
target person
person
people
focus determination
video information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2023531788A
Other languages
English (en)
Other versions
JPWO2023276700A1 (ja
Filing date
Publication date
Application filed filed Critical
Priority claimed from PCT/JP2022/024136 external-priority patent/WO2023276700A1/ja
Publication of JPWO2023276700A1 publication Critical patent/JPWO2023276700A1/ja
Publication of JPWO2023276700A5 publication Critical patent/JPWO2023276700A5/ja
Pending legal-status Critical Current

Links

Claims (11)

  1. ディスプレイ及びホワイトボードが設置された空間に滞在する複数の人が映る映像の映像情報を取得し、取得した前記映像情報に基づいて前記空間における前記複数の人の位置である第一位置を検知する人検知ユニットと、
    前記映像情報を取得し、取得した前記映像情報に基づいて前記複数の人のうちの対象者の頭部の向きを検知する頭部向き検知ユニットと、
    検知された前記第一位置、及び、検知された前記対象者の頭部の向きに基づいて、前記空間において前記複数の人によって行われるコミュニケーションに対する前記対象者の注力を判定する注力判定ユニットとを備え、
    前記注力判定ユニットは、前記複数の人のうち前記対象者以外の人が発話しているときに、検知された前記対象者の頭部の向きが、前記複数の人のうち前記対象者以外の人、前記ディスプレイ、及び、前記ホワイトボードのいずれかを向いている期間を、前記対象者が前記コミュニケーションに対して注力している期間であると判定する
    注力判定システム。
  2. 前記空間には机が設置され、
    前記人検知ユニットは、前記机の上に設置されたカメラから前記映像情報を取得する
    請求項1に記載の注力判定システム。
  3. 前記空間には、複数のカメラが設置され、
    前記人検知ユニットによって取得される前記映像情報には、前記複数のカメラのそれぞれによって撮影された映像の映像情報が含まれる
    請求項2に記載の注力判定システム。
  4. 前記空間には、前記カメラから前記対象者までの距離を計測するセンサが設置され、
    前記人検知ユニットは、取得した前記映像情報、及び、前記センサの検知結果に基づいて前記第一位置を検知する
    請求項2に記載の注力判定システム。
  5. 前記人検知ユニットは、前記第一位置を検知するために、前記映像における前記対象者の大きさに基づいて前記人検知ユニットから前記対象者までの距離を推定する
    請求項1に記載の注力判定システム。
  6. 前記注力判定ユニットは、前記複数の人のうち前記対象者以外の人が発話しているときに、検知された前記対象者の頭部の向きが、前記複数の人のうち前記対象者以外の発話していない人を向いている期間についても、前記対象者が前記コミュニケーションに対して注力している期間であると判定する
    請求項1に記載の注力判定システム。
  7. 請求項1~のいずれか1項に記載の注力判定システムと、
    判定された前記対象者の注力に基づいて、前記空間において前記複数の人によって行われるコミュニケーションの品質を解析するコミュニケーション解析ユニットとを備える
    コミュニケーション解析システム。
  8. さらに、前記空間において取得された音の音情報を取得し、取得した前記音情報に基づいて前記空間における音源の位置である第二位置を検知する音源検知ユニットと、
    検知された前記第一位置、及び、検知された前記第二位置に基づいて、前記対象者を追跡し、かつ、追跡中の前記対象者の発話量を推定する発話量推定ユニットとを備え、
    前記コミュニケーション解析ユニットは、判定された前記対象者の注力、及び、推定された前記対象者の発話量に基づいて、前記コミュニケーションの品質を解析する
    請求項7に記載のコミュニケーション解析システム。
  9. ディスプレイ及びホワイトボードが設置された空間に滞在する複数の人が映る映像の映像情報を取得し、取得した前記映像情報に基づいて前記空間における前記複数の人の位置である第一位置を検知する第一検知ステップと、
    前記映像情報を取得し、取得した前記映像情報に基づいて前記複数の人のうちの対象者の頭部の向きを検知する第二検知ステップと、
    検知された前記第一位置、及び、検知された前記対象者の頭部の向きに基づいて、前記空間において前記複数の人によって行われるコミュニケーションに対する前記対象者の注力を判定する注力判定ステップとを含み、
    前記注力判定ステップにおいては、前記複数の人のうち前記対象者以外の人が発話しているときに、検知された前記対象者の頭部の向きが、前記複数の人のうち前記対象者以外の人、前記ディスプレイ、及び、前記ホワイトボードのいずれかを向いている期間を、前記人が前記コミュニケーションに対して注力している期間であると判定する
    注力判定方法。
  10. 前記注力判定ステップにおいては、前記複数の人のうち前記対象者以外の人が発話しているときに、検知された前記対象者の頭部の向きが、前記複数の人のうち前記対象者以外の発話していない人を向いている期間についても、前記対象者が前記コミュニケーションに対して注力している期間であると判定する
    請求項9に記載の注力判定方法。
  11. 請求項9または10に記載の注力判定方法をコンピュータに実行させるためのプログラム。
JP2023531788A 2021-06-28 2022-06-16 Pending JPWO2023276700A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2021106485 2021-06-28
PCT/JP2022/024136 WO2023276700A1 (ja) 2021-06-28 2022-06-16 注力判定システム、コミュニケーション解析システム、及び、注力判定方法

Publications (2)

Publication Number Publication Date
JPWO2023276700A1 JPWO2023276700A1 (ja) 2023-01-05
JPWO2023276700A5 true JPWO2023276700A5 (ja) 2024-02-01

Family

ID=84692337

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2023531788A Pending JPWO2023276700A1 (ja) 2021-06-28 2022-06-16

Country Status (2)

Country Link
JP (1) JPWO2023276700A1 (ja)
WO (1) WO2023276700A1 (ja)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6870242B2 (ja) * 2016-08-31 2021-05-12 株式会社リコー 会議支援システム、会議支援装置、及び会議支援方法
JP2019057061A (ja) * 2017-09-20 2019-04-11 富士ゼロックス株式会社 情報出力装置及びプログラム
JP7139680B2 (ja) * 2018-05-14 2022-09-21 富士通株式会社 活性度評価プログラム、装置、及び方法
CN114631309A (zh) * 2019-11-07 2022-06-14 索尼集团公司 信息处理装置、信息处理方法和程序

Similar Documents

Publication Publication Date Title
US9693017B2 (en) Automatic switching between different cameras at a video conference endpoint based on audio
CN103581608B (zh) 发言人检测系统、发言人检测方法和音频/视频会议系统
JP6519370B2 (ja) ユーザ注意判定システム、方法及びプログラム
KR102230667B1 (ko) 오디오-비주얼 데이터에 기반한 화자 분리 방법 및 장치
US20120259638A1 (en) Apparatus and method for determining relevance of input speech
CN111432115B (zh) 基于声音辅助定位的人脸追踪方法、终端及存储装置
CN110808048A (zh) 语音处理方法、装置、系统及存储介质
WO2018095166A1 (zh) 一种设备控制方法、装置及系统
WO2018049957A1 (zh) 音频信号、图像处理的方法、装置和系统
JP2006129480A5 (ja)
JP2019186955A (ja) 情報処理システム、情報処理方法及びプログラム
WO2019161196A3 (en) System and method for disambiguating a source of sound based on detected lip movement
JP4288428B2 (ja) 映像解析システムおよび映像解析方法
KR101508092B1 (ko) 화상 회의를 지원하는 방법 및 시스템
WO2021017096A1 (zh) 一种将人脸信息录入数据库的方法和装置
D'Arca et al. Robust indoor speaker recognition in a network of audio and video sensors
JP2005141687A (ja) 物体追跡方法、物体追跡装置、物体追跡システム、プログラム、および、記録媒体
Siracusa et al. A multi-modal approach for determining speaker location and focus
Busso et al. Real-time monitoring of participants' interaction in a meeting using audio-visual sensors
Douxchamps et al. Robust real time face tracking for the analysis of human behaviour
D'Arca et al. Person tracking via audio and video fusion
WO2021033592A1 (en) Information processing apparatus, information processing method, and program
JPWO2009119288A1 (ja) コミュニケーションシステム及びコミュニケーションプログラム
JP2010199865A (ja) 異常検知システム、異常検知方法及び異常検知プログラム
JPWO2023276700A5 (ja)