JP7697477B2 - 画像表示装置、画像表示方法およびプログラム - Google Patents

画像表示装置、画像表示方法およびプログラム Download PDF

Info

Publication number
JP7697477B2
JP7697477B2 JP2022569762A JP2022569762A JP7697477B2 JP 7697477 B2 JP7697477 B2 JP 7697477B2 JP 2022569762 A JP2022569762 A JP 2022569762A JP 2022569762 A JP2022569762 A JP 2022569762A JP 7697477 B2 JP7697477 B2 JP 7697477B2
Authority
JP
Japan
Prior art keywords
person
image
interest
data
display device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2022569762A
Other languages
English (en)
Other versions
JPWO2022130822A1 (ja
JPWO2022130822A5 (ja
Inventor
曜教 内田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Publication of JPWO2022130822A1 publication Critical patent/JPWO2022130822A1/ja
Publication of JPWO2022130822A5 publication Critical patent/JPWO2022130822A5/ja
Application granted granted Critical
Publication of JP7697477B2 publication Critical patent/JP7697477B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Measuring devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor or mobility of a limb
    • A61B5/1113Local tracking of patients, e.g. in a hospital or private home
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Measuring devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor or mobility of a limb
    • A61B5/1126Measuring movement of the entire body or parts thereof, e.g. head or hand tremor or mobility of a limb using a particular sensing technique
    • A61B5/1128Measuring movement of the entire body or parts thereof, e.g. head or hand tremor or mobility of a limb using a particular sensing technique using image analysis
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • G06T7/0014Biomedical image inspection using an image reference approach
    • G06T7/0016Biomedical image inspection using an image reference approach involving temporal comparison
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/166Detection; Localisation; Normalisation using acquisition arrangements
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/40ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/80ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for detecting, monitoring or modelling epidemics or pandemics, e.g. flu
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H80/00ICT specially adapted for facilitating communication between medical practitioners or patients, e.g. for collaborative diagnosis, therapy or health monitoring
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/01Measuring temperature of body parts ; Diagnostic temperature sensing, e.g. for malignant or inflamed tissue
    • A61B5/015By temperature mapping of body part
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10048Infrared image
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/07Target detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Physics & Mathematics (AREA)
  • Public Health (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Multimedia (AREA)
  • Biomedical Technology (AREA)
  • Pathology (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Human Computer Interaction (AREA)
  • Surgery (AREA)
  • Physiology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Molecular Biology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Quality & Reliability (AREA)
  • Veterinary Medicine (AREA)
  • Dentistry (AREA)
  • Biophysics (AREA)
  • Social Psychology (AREA)
  • Psychiatry (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Alarm Systems (AREA)

Description

本発明は画像表示装置、画像表示システム、画像表示方法および非一時的なコンピュータ可読媒体に関する。
所定の領域に存在する複数の人物における感染症の感染リスクを把握したいという要求が高まっている。かかる要求を実現する手段としいて、例えば人物の身体の状態を推定し、その人物が存在する領域における人物同士の接触状態等を視認することが効果的であると考えられている。そのためには、感染症の症状を示している人物を把握し、かかる人物と周辺の人物とが濃厚接触をしている可能性を見出すための技術が求められている。
このような技術に関連して、例えば特許文献1には、ユーザの身体の状態の変化を把握するシステムが示されている。かかる技術は、特定のユーザの過去の測定データが所定の範囲に収まらない場合には、他のユーザの過去の測定データのうち、最新の測定データと類似する類似測定データを検索し、ユーザが近い将来に患う可能性がある病気又は症状を推定する。
また特許文献2には、院内感染影響範囲閲覧システムが記載されている。このシステムは、ラウンド経路機器、ラウンドログ記録端末、ログ解析部およびマップ表示部を有する。ラウンド経路機器は医療施設内に配置され、ラウンドログ記録端末はラウンド経路機器との交信記録から人物のラウンド情報を記録する。ログ解析部は、予め設定された解析ルールに基づいてラウンド情報を解析して人物の感染危険度を算出する。またマップ表示部は、予め設定されたマップ情報と、ラウンド情報で得られた人物の移動経路と、人物の感染危険度とに基づいて、医療施設における感染影響範囲を表示する。
特許文献3には、通信手段を通して在宅療法患者の使用する医療機器に接続されるモニターセンターと、在宅療法患者の個人情報を格納するデータベースを有する在宅療法患者救援システムが示されている。モニターセンターは、在宅療法患者の使用する医療機器の状態を所定期間毎に検知し、災害発生時に、データベースを検索し、重症度順に救済優先順位のリストを作成する。
特開2019-036184号公報 特開2016-184196号公報 特開2003-122855号公報
しかしながら、上述の技術を組み合わせたとしても、大勢が行き交う場所において感染症の症状を示している人物の動向を全て追跡するのは困難である。
本開示はこのような課題を鑑みてなされたものであり、感染リスクが高い状況を好適に表示する画像表示装置等を提供することを目的とする。
本開示の1実施形態にかかる画像表示装置は、画像データ取得手段、特定手段、推定手段、注目画像検出手段および出力手段を有する。画像データ取得手段は、カメラから複数の画像データを取得する。特定手段は、画像データから人物を特定する。推定手段は、画像データから特定した人物の感染症の発症可能性を推定する。注目画像検出手段は、推定の結果に基づいて、前記発症可能性を有する注目人物と注目人物の周辺に周辺人物とが含まれる注目画像を検出する。出力手段は、注目画像を含む一連の画像群を抽出して表示する。
本開示の1実施形態にかかる方法は、以下の方法をコンピュータが実行する。コンピュータは、カメラから複数の画像データを取得する。コンピュータは、画像データから人物を特定する。コンピュータは、特定した人物における感染症の発症可能性を推定する。コンピュータは、推定の結果に基づいて、前記発症可能性を有する注目人物と、注目人物の周辺に周辺人物が含まれる注目画像を検出する。コンピュータは、注目画像を含む一連の画像群を抽出する。
本開示の1実施形態にかかるプログラムは、コンピュータに、以下のステップを実行させるものである。コンピュータは、カメラから複数の画像データを取得する。コンピュータは、画像データから人物を特定する。コンピュータは、特定した人物における感染症の発症可能性を推定する。コンピュータは、推定の結果に基づいて、前記発症可能性を有する注目人物と、注目人物の周辺に周辺人物が含まれる注目画像を検出する。コンピュータは、注目画像を含む一連の画像群を抽出する。
本開示によれば、感染リスクが高い状況を好適に表示する画像表示装置等を提供することができる。
実施の形態1にかかる画像表示装置のブロック図である。 実施の形態1にかかる画像表示方法を示すフローチャートである。 実施の形態2にかかる画像表示装置のブロック図である。 実施の形態2にかかる画像表示システムのブロック図である。 実施の形態2にかかる画像表示装置が抽出する画像群の例を示す図である。 実施の形態3にかかる画像表示装置のブロック図である。 実施の形態4にかかる画像表示装置のブロック図である。 実施の形態5にかかる画像表示装置のブロック図である。 実施の形態6にかかる画像表示装置のブロック図である。 実施の形態6にかかる画像表示方法を示すフローチャートである。 実施の形態6にかかる画像表示装置が表示する画像の例を示す図である。
以下、発明の実施の形態を通じて本発明を説明するが、特許請求の範囲にかかる発明を以下の実施形態に限定するものではない。また、実施形態で説明する構成の全てが課題を解決するための手段として必須であるとは限らない。説明の明確化のため、以下の記載および図面は、適宜、省略、および簡略化がなされている。なお、各図面において、同一の要素には同一の符号が付されており、必要に応じて重複説明は省略されている。
<実施の形態1>
以下、図面を参照して本発明の実施の形態について説明する。図1は、実施の形態1にかかる画像表示装置10のブロック図である。図1に示す画像表示装置10は、所定の施設内または屋外に設置されたカメラに接続し、カメラが撮影した画像データを取得して、注目すべき画像ないし画像群を表示する。画像表示装置10は主な構成として画像データ取得部111、特定部112、推定部113、注目画像検出部114および出力部115を有する。
画像データ取得部111は、カメラから複数の画像データを取得する。複数の画像データとは、異なる時刻に撮影された画像データである。例えばカメラは1秒間に30フレームの画像を撮影し、撮影したこれらの画像にかかる画像データを画像データ取得部111に供給する。画像データ取得部111が接続するカメラは1台でもよいし複数でもよい。また画像データ取得部111が接続するカメラは所定の画角を撮影するために固定されていてもよいし、パン、チルトまたはズームを行う可動式のものであってもよい。画像データ取得部111は、カメラから取得した画像データを、少なくとも特定部112に供給する。また画像データ取得部111はカメラから取得した画像データを、適宜、他の構成にも供給する。
特定部112は、画像データ取得部111から画像データを受け取り、受け取った画像データから人物を特定する。より具体的には例えば、特定部112は、受け取った画像データの特徴量を抽出して人物の特徴量を検出する。特定部112は、特定した人物に関するデータ(特定データ)を推定部113に供給する。
推定部113は、特定部112から特定データを受け取り、受け取った特定データを利用して、特定した人物の感染症の発症可能性を推定する。より具体的には例えば、推定部113は、特徴データとして人物の身体動作の状態を受け取り、特定した人物が感染症の発症にかかる症状動作を示していることを検出する。感染症の発生にかかる症状動作とは例えば、咳、くしゃみ、臀部に手を当てる、胸に手を当てるなどの動作である。推定部113は、特定した人物について感染症の発症可能性があるか否かを推定する。この場合、推定部113は、特定した人物が予め設定された動作を行っている場合に、感染症の発症可能性を有すると推定してもよい。あるいは推定部113は、特定した人物の複数の動作から、感染症の発症可能性が予め設定された閾値以上であるか否かを推定してもよい。推定部113は、上記推定の結果を注目画像検出部114に供給する。
注目画像検出部114は、推定部113から受け取った推定の結果を利用して、画像データ取得部111が取得した複数の画像データから感染症を発症している可能性がある注目人物が含まれる画像を検出する。ここで「注目人物」は、推定部113が感染症の発症可能性を有すると推定した人物を指す。また注目画像検出部114は、画像データ取得部111が取得した複数の画像データから、注目人物と周辺人物とが含まれる注目画像を検出する。
ここで「周辺人物」とは、例えば注目人物との距離が予め設定された値より近い位置に存在している人物をいう。ただし周辺人物の定義は上述の内容に限られない。例えば、周辺人物は、注目人物との距離が予め設定された値より近く、且つ、予め設定された期間以上の間存在している人物であってもよい。すなわち、周辺人物は、感染症の発症可能性がある注目人物の近くに存在し、注目人物から感染症が伝染する可能性がある人物である。注目画像検出部114は、注目人物から周辺人物へ感染症が伝染する可能性がある状況を、感染リスクが高い状況と判断して、撮影した画像を注目画像として検出する。注目画像検出部114は、注目画像を検出すると、注目画像に関するデータを出力部115に供給する。
出力部115は、注目画像検出部114から注目画像に関するデータを受け取り、受け取ったデータから注目画像を含む一連の画像群を抽出する。出力部115は、例えば注目画像を含む予め設定された期間分の画像群を抽出する。予め設定された期間は、例えば注目画像の前後各5秒間、10秒間または30秒間などである。なお、本開示において「画像群」とは、連続して撮影された画像である。よって、「画像群」は「動画」と称してもよい。出力部115は、抽出した画像群を接続する所定の表示装置に出力する。
以上、画像表示装置10の構成について説明した。画像表示装置10は、このような構成により、カメラから取得した画像データから、感染症を発症した疑いがある人物を検出するとともに、かかる人物の周辺の人物に感染症が伝染した可能性がある画像群を抽出して表示することができる。
次に、図2を参照して画像表示装置10が実行する画像表示方法について説明する。図2は、実施の形態1にかかる画像表示方法を示すフローチャートである。図2に示すフローチャートは、例えば画像表示装置10が起動することにより開始される。
まず、画像データ取得部111は、カメラから複数の画像データを取得する(ステップS11)。画像データ取得部111は、取得した複数の画像データを少なくとも特定部112に供給する。
次に特定部112は、画像データ取得部111から画像データを受け取り、受け取った画像データから人物を特定する(ステップS12)。特定部112は、人物を特定すると、特定データを推定部113に供給する。
次に、推定部113は、特定部112から受け取った特定データを利用して、特定した人物における感染症の発症可能性を推定する(ステップS13)。推定部113は、推定の結果を注目画像検出部114に供給する。
次に、注目画像検出部114は、推定部113から受け取った推定の結果から、発症可能性を有する注目人物と当該注目人物の周辺に周辺人物とが含まれる注目画像を検出する(ステップS14)。注目画像検出部114は、検出した注目画像を、出力部115に供給する。
次に、出力部115は、注目画像検出部114から受け取った注目画像から注目画像を含む一連の画像群を抽出し、抽出した一連の画像群を所定の表示装置に出力する(ステップS15)。
以上、実施の形態1にかかる画像表示装置について説明した。尚、画像表示装置10は、図示しない構成としてプロセッサ及び記憶装置を有するものである。画像表示装置10が有する記憶装置は、例えばフラッシュメモリやSSD(Solid State Drive)などの不揮発性メモリを含む記憶装置を含む。この場合に、画像表示装置10が有する記憶装置は、上述の画像表示方法を実行するためのコンピュータプログラム(以降、単にプログラムとも称する)を記憶している。またプロセッサは、記憶装置からコンピュータプログラムをDRAM(Dynamic Random Access Memory)等のバッファメモリへ読み込ませ、当該プログラムを実行する。
画像表示装置10が有する各構成は、それぞれが専用のハードウェアで実現されていてもよい。また、各構成要素の一部又は全部は、汎用または専用の回路(circuitry)、プロセッサ等やこれらの組合せによって実現されてもよい。これらは、単一のチップによって構成されてもよいし、バスを介して接続される複数のチップによって構成されてもよい。各装置の各構成要素の一部又は全部は、上述した回路等とプログラムとの組合せによって実現されてもよい。また、プロセッサとして、CPU(Central Processing Unit)、GPU(Graphics Processing Unit)、FPGA(field-programmable gate array)等を用いることができる。なお、ここに説明した構成に関する説明は、本開示において以下に説明するその他の装置またはシステムにおいても、適用され得る。
また、画像表示装置10の各構成要素の一部又は全部が複数の情報処理装置や回路等により実現される場合には、複数の情報処理装置や回路等は、集中配置されてもよいし、分散配置されてもよい。例えば、情報処理装置や回路等は、クライアントサーバシステム、クラウドコンピューティングシステム等、各々が通信ネットワークを介して接続される形態として実現されてもよい。また、画像表示装置10の機能がSaaS(Software as a Service)形式で提供されてもよい。
以上、実施の形態1について説明した。実施の形態1にかかる画像表示装置10は、複数の人物が行き交う場所において感染症の症状を示している注目人物を検出し、さらに注目人物の周辺に存在する人物に感染症が伝染する可能性がある状況を含む画像を表示できる。よって、実施の形態1によれば、感染リスクが高い状況を好適に表示する画像表示装置等を提供することができる。
<実施の形態2>
次に、実施の形態2について説明する。図3は、実施の形態2にかかる画像表示装置20のブロック図である。図3に示す画像表示装置20は、熱画像データ取得部116および記憶部120を有する点が、実施の形態1と異なる。
熱画像データ取得部116は、赤外線カメラ(またはサーマルカメラ)から熱画像データを取得する。なお、以降の説明において赤外線カメラとの区別を容易にするため、画像データ取得部111に接続するカメラを「可視光カメラ」とも称する。また可視光カメラが生成する画像データを「可視光画像データ」とも称する。赤外線カメラは、画像データ取得部111に接続している可視光カメラに対応して設置される。
可視光カメラおよび赤外線カメラは、所定の施設内や施設の周辺または屋外における所定の場所等に設置されている。可視光カメラは、人物を含む風景を撮影し、撮影した風景の画像にかかる可視光画像データ生成し、生成した可視光画像データを画像データ取得部111に供給する。赤外線カメラは、人物を含む風景を撮影し、撮影した風景の画像にかかる熱画像データ生成し、生成した熱画像データを熱画像データ取得部116に供給する。
可視光カメラと赤外線カメラとは、少なくとも撮影範囲の一部が互いに重複している。換言すると、赤外線カメラは、可視光カメラが撮影する可視光画像の少なくとも一部に対応した撮影範囲を持つ。また可視光カメラと赤外線カメラとは、互いの位置関係が変化しないように固定されていることが好ましい。このような構成により、撮影装置は、可視光カメラが生成した可視光画像データに含まれる人物の画像と赤外線カメラが生成した熱画像データに含まれる人物の画像とを対応づけることができる。
なお、可視光カメラおよび赤外線カメラは、それぞれ1台であってもよいし、複数であってもよい。また例えば可視光カメラまたは赤外線カメラは、互いの位置関係が変化する可動式であってもよい。この場合、可視光カメラまたは赤外線カメラは、例えばユーザの操作等により一時的にパン、チルトまたはズームを行って、画角が変更されたとしても、その後自動的に所定の位置に復帰することが好ましい。
熱画像データ取得部116は、上述の赤外線カメラから熱画像データを取得し、取得した熱画像データを、推定部113に供給する。
本実施の形態における推定部113は、熱画像データに含まれる人物の体表温度を測定する。例えば推定部113はまず、可視光画像データから人物の画像を抽出する。このとき推定部113は、人物の身体の内、顔画像など特定の部位のみを抽出してもよい。次に推定部113は、特定した人物の画像に対応する熱画像データを抽出する。さらに推定部113は、抽出した熱画像データから特定した人物の体表温度を測定する。推定部113は、抽出された熱画像データのうち最も高い温度を示す部分から体表温度を測定してもよい。また推定部113は、抽出された熱画像データの温度の統計値を算出し、算出した統計値を人物の体表温度としてもよい。
推定部113は、熱画像データから測定した人物の体表温度を利用して、人物の発症可能性を推定する。より具体的には例えば、推定部113は、特定した人物の体表温度を測定し、測定値が予め設定された閾値(例えば摂氏37.5度)以上の場合に、感染症の発症可能性を有すると推定する。また推定部113は、上述の測定した体表温度と後述の症状動作とを加味して感染症の発症可能性を推定してもよい。
推定部113は、可視光画像データを受け取ると、受け取った可視光画像データに含まれる人物の画像データからその人物の動作状態を検出する。そして推定部113は、記憶部120が記憶する症状動作データベース121を読み取る。さらに推定部113は、検出した人物の動作状態と、症状動作データベース121に含まれる症状動作パターンとを照合し、人物の動作状態が感染症の発症にかかる症状動作に一致するか否かを照合する。これにより、推定部113は、人物の発症可能性を推定する。
すなわち推定部113は、人物の動作状態が感染症の発症にかかる症状動作に一致する場合に、かかる人物が感染症の発症可能性を有すると推定する。より具体的には、例えば推定部113は、画像データから特定した人物が咳またはくしゃみを行う動作を検出する。一方、症状動作データベース121は、人物が咳またはくしゃみを行う動作パターンを記憶する。推定部113は、検出した動作と、症状動作パターンとを照合し、これらが一致する場合に、検出した動作にかかる人物が感染症に発症している可能性を推定する。なお、上述の説明において、照合の結果が一致するとは、実質的に一致することを示すものであって、一致の判定は当業者により適宜設定され得る。
本実施の形態における注目画像検出部114は、注目人物および周辺人物が注目動作を行っていることを検出する。ここで「注目動作」とは、人物の口の動き、マスクの装着、咳、くしゃみ、接触動作の少なくとも1つを含む動作であって、感染症の感染リスクが高くなると判断される所定のものを指す。例えば人物が激しく口を動かしている動作を行っている場合、その人物は話をしていると想定される。注目画像検出部114は、注目人物および周辺人物が含まれる画像において、注目人物および周辺人物がこのような注目動作を行っていることを検出した場合、注目画像を検出する。
注目画像検出部114は、画像データにかかる画像における人物が含まれる領域の混雑度をさらに加味して注目画像を検出してもよい。この場合、注目画像検出部114は、混雑度が比較的に高い場合に、感染症の感染リスクが比較的に高いと判断する。注目画像検出部114は、混雑度として、画像データにおける空間と人数の関係から所定の人口密度を算出してもよい。また注目画像検出部114は、混雑度として、画像データにおいて群衆検知を行ってもよい。群衆とは、所定の空間において複数の人物が重なり合って見える状態を示す。この場合、注目画像検出部114は、群衆を検知し、検知した群衆の混雑状態を識別し、混雑度を算出しうる。
なお、注目画像検出部114は、同一の画角において注目人物および周辺人物が存在し続ける場合には、注目人物および周辺人物が存在している期間から1つの注目画像を検出するように設定されてもよい。これにより、注目画像検出部114は、注目画像が冗長的に検出されることを抑制できる。
記憶部120は、EPROM(Erasable Programmable Read Only Memory)またはフラッシュメモリ等の不揮発メモリを含む記憶装置である。記憶部120は、症状動作データベース121を記憶する。症状動作データベース121は、感染症の発症可能性を推定するためのデータベースであって、感染症を発症した人物の症状動作パターンを含む。上述のように、記憶部120は、推定部113に対して症状動作データベース121を適宜供給する。症状動作データベース121は、複数の症状動作パターンを含んでいてもよい。また症状動作データベース121に含まれるデータは適宜更新されてもよい。
次に、図4を参照して、画像表示装置20を含むシステムの構成について説明する。図4は、実施の形態2にかかる画像表示システム1のブロック図である。画像表示システム1は、施設900における人物の感染リスクの把握を目的として設置されている。画像表示システム1は主な構成として、画像表示装置20、画像表示装置、可視光カメラ300およびサーマルカメラ400を有する。
可視光カメラ300およびサーマルカメラ400は、施設900の所定の位置に固定されており、施設900の人物を撮影する。可視光カメラ300およびサーマルカメラ400は、通信ネットワークであるネットワークN1を介して画像表示装置20に通信可能に接続している。図に示すように、例えば可視光カメラ300は点線により示した画角により人物P1および人物P2を撮影し、可視光画像データを生成して画像表示装置20に供給する。またサーマルカメラ400は、二点鎖線により示した画角により人物P1および人物P2を撮影し、熱画像データ生成して画像表示装置20に供給する。
図4に示す画像表示装置20は、ネットワークN1を介して可視光カメラ300と接続し、可視光画像データを受け取る。また画像表示装置20は、ネットワークN1を介してサーマルカメラ400と接続し、熱画像データを受け取る。また画像表示装置20は、ディスプレイ200に通信可能に接続し、出力部115を介して一連の画像群にかかる画像データを出力する。なお、図に示す例においては、可視光カメラ300およびサーマルカメラ400は1つずつ示されているが、これらカメラの数は複数であってもよい。複数のカメラが異なる場所を撮影し、それぞれが撮影した画像データを画像表示装置20に供給することにより、画像表示システム1は、施設900の広範囲において感染リスクの把握を行うことができる。
ディスプレイ200は、例えば液晶ディスプレイや有機エレクトロルミネッセンスを含む表示装置である。ディスプレイ200は、画像表示装置20と通信可能に接続し、画像表示装置20から画像データを受け取り、受け取った画像データを表示する。なお、図4に示した例において、画像表示装置20とディスプレイ200とはネットワークN1を介さずに接続しているが、ネットワークN1を介して接続していてもよい。ディスプレイ200に表示される画像群を画像表示システム1のユーザが視認することにより、ユーザは、感染者である可能性が高い注目人物と周辺人物との接触状況を把握できる。
次に、図5を参照して、画像表示装置20が抽出する画像群について説明する。図5は、実施の形態2にかかる画像表示装置が抽出する画像群の例を示す図である。図5において、左から右に向かって水平方向に延びる矢印は、時刻の経過を示している。また図5において矢印の上側には、矢印に平行に延びる帯形状は撮影期間V20が示されている。撮影期間V20は、可視光カメラ300が撮影した複数の画像すなわち動画が連続的に生成されている期間を模式的に示している。
撮影期間V20の中には左右方向に延びる第1期間Q1および第2期間Q2が示されている。第1期間Q1は、可視光カメラ300が撮影している画像の中に人物P1が含まれる期間を示している。第2期間Q2は、可視光カメラ300が撮影している画像の中に人物P2が含まれる期間を示している。具体的には、第1期間Q1は、時刻T1から時刻T7の間を示している。第2期間Q2は、時刻T1より後の時刻T2から時刻T7より前の時刻T6の間を示している。
帯形状V20の中央部分には、太字により示された抽出期間V21が重畳されている。抽出期間V21は、人物P1と人物P2とが接近している期間であって、出力部115が抽出した一連の画像群が撮影された期間を示している。より具体的には、抽出期間V21は、時刻T3より後の時刻T3から時刻T6より前の時刻T5までの間を示している。抽出期間V21の中央部には、ハッチングにより示された注目時刻V22が示されている。注目時刻V22は、時刻T3より後であって、且つ時刻T5より前の時刻T4である。
図5において、時刻T4は、注目画像検出部114が検出した注目画像が撮影された時刻である。すなわち、人物P1と人物P2とは時刻T4において、例えば最も接近した状態であって、感染リスクが高いと判断される状況であった。そのため、注目画像検出部114は、時刻T4に撮影された画像を、注目画像として検出した。また、出力部115は、注目画像が撮影された時刻の前後の予め設定された期間(すなわち時刻T3から時刻T5まで)を、一連の画像群として抽出する。
以上、画像表示装置20が抽出する画像群について説明した。なお、上述の画像群の抽出の方法はあくまで一例であって、出力部115が抽出する画像群は、上述の方法に限られない。例えば、出力部115は、人物P2が画角に含まれている期間すなわち時刻T2から時刻T6の間を抽出してもよい。また出力部115は、人物P1が画角に含まれている期間すなわち時刻T1から時刻T7の間を抽出してもよい。なお、出力部115は一連の画像群を抽出する際に、画像データのフレームレートや画質に変更を加えてもよい。
以上、実施の形態2について説明した。実施の形態2にかかる画像表示装置20および画像表示システム1は、複数の人物が行き交う場所において感染症の症状を示している注目人物を検出し、さらに注目人物の周辺に存在する人物に感染症が伝染する可能性がある状況を含む画像を表示できる。よって、実施の形態2によれば、感染リスクが高い状況を好適に表示する画像表示装置や画像表示システム等を提供することができる。
<実施の形態3>
次に、実施の形態3について説明する。図6は、実施の形態3にかかる画像表示装置30のブロック図である。図6に示す画像表示装置30は、記憶部120が認証データベースを記憶する点が、上述の実施の形態と異なる。また図6に示す画像表示装置30は、特定部112が行う処理が上述の実施の形態と異なる。
認証データベース122は、人物の認証データおよび人物の属性データが含まれる。認証データは、特定部112が行う認証に利用されるデータである。認証データは、人物固有の特徴を識別するためのデータであって、例えば顔画像の特徴データである。認証データは、虹彩データや耳の形状データであってもよい。
属性データは、認証にかかる人物に付随するデータであって、感染症に感染するリスクを判定する場合に利用される。例えば属性データは、認証にかかる人物が有する抗体証明データを含んでもよい。抗体証明データは、感染症の抗体を有するか否かを示すデータである。また属性データは、認証にかかる人物の感染症に関連する既往歴や、認証にかかる人物の感染症に対する耐性に関連する他の情報であってもよい。
本実施の形態における特定部112は、人物の特定に加えて、認証データを利用した人物の認証を併せて行う。特定部112は、人物を特定する場合に、認証データベース122に含まれる認証データを利用する。特定部112は、認証の結果を、推定部113に供給する。推定部113は、特定部112から受け取ったデータから認証にかかる人物の感染可能性を推定する。
具体的には例えば、推定部113は、認証にかかる人物の体表温度が閾値以上の場合や、かかる人物が症状動作パターンと一致する動作を行った場合において、この人物が抗体証明を有している場合には、これを加味したうえで症状を示しているか否かを判定する。すなわち、抗体証明を有する人物の体表温度が閾値以上の場合や、抗体証明を有する人物が症状動作パターンと一致する動作を行った場合には、推定部113は、かかる人物が感染症の症状を示している可能性があると判定しない場合もある。
また本実施の形態における注目画像検出部114は、属性データに基づいて注目画像を検出する。例えば注目画像検出部114は、認証にかかる人物の抗体証明データを加味して注目画像を検出する。より具体的には、注目人物の近くに存在する周辺人物が抗体証明を有している場合には、注目画像検出部114は、この周辺人物について感染の可能性は高いと判定しない。そのため、注目画像検出部114はこの抗体証明を有する人物が注目人物の近くに存在しても、これを注目画像として検出しない場合もある。
以上、実施の形態3について説明した。実施の形態3にかかる画像表示装置30は、複数の人物が行き交う場所において感染症の症状を示している注目人物を検出し、さらに注目人物の周辺に存在する人物に感染症が伝染する可能性がある状況を含む画像を表示できる。また画像表示装置30は注目人物の検出や注目画像の抽出時に、認証にかかる人物の属性データを加味したうえで処理を行う。よって、実施の形態3によれば、人物の個別事情を加味したうえで、感染リスクが高い状況を好適に表示する画像表示装置等を提供することができる。
<実施の形態4>
次に、実施の形態4について説明する。実施の形態4にかかる画像表示装置40は、記憶部120が指数データベース123を記憶している点、および注目画像検出部114が指数データベース123を利用する点が上述の実施の形態と異なる。図7は、実施の形態4にかかる画像表示装置40のブロック図である。
本実施の形態における注目画像検出部114は、取得する画像データの撮影場所に関する感染リスク指数を加味して注目画像を検出する。例えば、比較的に感染指数が高い場所において注目人物と周辺人物とが接触する画像と、比較的に感染指数が低い場所において同様の接触がある画像と、が存在する場合に、注目画像検出部114は、前者を注目画像として検出し、後者を検出しない場合がある。
本実施の形態における記憶部120は、指数データベース123を記憶している。指数データベース123は、取得する画像データの撮影場所に関する感染リスク指数を含むデータベースである。指数データベース123は、所定の撮影場所を撮影するカメラに紐づけられており、予め設定された値である。
例えば屋外の画像データに付随する感染リスク指数は、屋内の画像データに付随する感染リスク指数より低く設定される。また屋内の画像データであっても、比較的に狭い空間の画像データに付随する感染リスク指数は、比較的に広い空間の画像データに付随する感染リスク指数よりも高く設定される。その他、感染リスク指数は、例えば部屋の換気状況や部屋の形状などに応じて、空気の流れが比較的に良い場所よりも、空気の流れが比較的に良くない場所の方が高く設定され得る。なお、1台のカメラが撮影する画像データにおける異なる撮影領域に対して異なる感染リスク指数がそれぞれ設定されていてもよい。
また感染リスク指数は、適宜更新されてもよい。例えば、注目画像検出部114は、注目人物が予め設定された期間以上の期間に亘り、同じ場所に留まっていた場合には、注目人物が留まっていた場所の感染リスク指数を一時的に高く設定してもよい。この場合、注目画像検出部114は、予め設定した期間以上の期間を注目人物が留まっていた注目領域を検出し、注目領域に周辺人物が存在している画像を注目画像として検出してもよい。
以上、実施の形態4について説明した。画像表示装置40は、注目画像の抽出時に、撮影場所にかかる感染リスク指数を加味して処理を行う。よって、実施の形態4によれば、撮影場所の事情を加味したうえで、感染リスクが高い状況を好適に表示する画像表示装置等を提供することができる。
<実施の形態5>
次に、実施の形態5について説明する。実施の形態5にかかる画像表示装置は、音声データ取得部を有する点、および注目人物の検出や注目画像の検出の際に音声データを利用する点が、上述の実施の形態と異なる。図8は、実施の形態5にかかる画像表示装置50のブロック図である。
画像表示装置50は、音声データ取得部117を有する。音声データ取得部117は、画像データの撮影領域に設置されたマイクが収音して生成した音声データを取得する。音声データ取得部117は、取得した音声データを推定部113および注目画像検出部114に供給する。
本実施の形態における推定部113は、特定された人物が発する音声から発症可能性を推定する。例えば推定部113は、音声データ取得部117から受け取った音声データから、特定された人物が発していると推定される音声を抽出する。この際、推定部113は、音声データに加えて、可視光画像データまたは熱画像データを併せて解析してもよい。特定された人物が、咳やくしゃみなどをしている場合には、推定部113は、これを症状動作パターンと紐づける。
また本実施の形態における注目画像検出部114は、音声データ取得部117から音声データを受け取り、受け取った音声データから注目人物および周辺人物が発する音声を検出する。そして、注目人物が周辺人物の近くで咳やくしゃみをしていること、または注目人物が周辺人物に対して話しかけていること、あるいは大声を発していること等を検出する。この際、注目画像検出部114は、可視光画像データまたは熱画像データにおける注目人物および周辺人物の身体の姿勢を併せて解析したうえで、上述の音声を検出してもよい。このような手法により、注目画像検出部114は、画像データから注目画像を検出する。
以上、実施の形態5について説明した。画像表示装置50は、注目人物を決定する場合や注目画像を検出する際に音声データを利用する。これにより画像表示装置50は、所望の画像を表示させるための精度が向上する。よって、実施の形態5によれば、感染リスクが高い状況を精度よく表示する画像表示装置等を提供することができる。
<実施の形態6>
次に、実施の形態6について説明する。実施の形態6は、注目度設定部を有する点が、上述の実施の形態と異なる。図9は、実施の形態6にかかる画像表示装置60のブロック図である。画像表示装置60は、注目度設定部118を有する。
注目度設定部118は、注目画像に対して注目度を設定する。注目度は、一連の画像群を表示させる場合の指標となるものであって表示優先度ということもできる。注目度は、例えば所定の範囲における数値により示される。所定の範囲は、例えば0、1および2などの数段階の範囲であってもよい。例えば注目度が高い画像群ほど、感染症が周辺人物に伝染している可能性が高い状況を示している。注目度設定部118は、注目人物と周辺人物との接触状態を解析し、解析の結果に応じて注目度を設定する。具体的には例えば、注目度設定部118は、注目人物と周辺人物とが至近距離で向かい合って会話をしている画像の注目度(第1注目度)を、注目人物と周辺人物とが会話をしていない画像の注目度(第2注目度)より高く設定する。
また上述の例に加えて、例えば注目度設定部118は、大勢の人物が存在しており混雑している状況において注目人物および周辺人物が対峙している場合には、混雑していない場合に比べて注目度を高く設定する。あるいは、注目人物および周辺人物が対峙している場合において、注目人物および周辺人物がマスクを装着していない場合には、マスクを装着している場合に比べて注目度を高く設定する。あるいは、注目人物および周辺人物が対峙している場合において、注目人物および周辺人物が対峙している場所の感染リスク指数が高い場合には、感染リスク指数が低い場所における同様の状況よりも注目度を高く設定する。
この場合、出力部115は、注目度が高い画像群ほど表示の優先度を高く設定して出力する。すなわち出力部115は、相対的に注目度が高い第1注目度に設定された画像群を、相対的に注目度が低い第2注目度に設定された画像群より優先的に出力する、
次に、図10を参照して画像表示装置60が行う処理について説明する。図10は、実施の形態6にかかる画像表示方法を示すフローチャートである。図10に示すフローチャートは、ステップS14とステップS15との間に、ステップS21およびステップS22が加わる点が、図2に示したフローチャートと異なる。
ステップS14において、注目画像検出部114は、推定部113から受け取った推定の結果から、発症可能性を有する注目人物と当該注目人物の周辺に周辺人物とが含まれる注目画像を検出する(ステップS14)。注目画像検出部114は、検出した注目画像を、出力部115および注目度設定部118に供給する。
次に、注目度設定部118は、注目画像検出部114から受け取った注目画像に対して注目度を設定する(ステップS21)。注目度設定部118は、注目画像に対して設定した注目度を、出力部115に供給する。
次に、出力部115は、設定された注目度に応じて注目画像の表示順を設定する(ステップS22)。
次に、出力部115は、注目画像検出部114から受け取った注目画像から注目画像を含む一連の画像群を抽出し、抽出した一連の画像群を、上述の表示順にしたがって表示装置に出力する(ステップS15)。
以上、画像表示装置60が行う処理について説明した。画像表示装置60は、複数の注目画像を検出し、それに伴い複数の画像群を抽出した場合には、注目度の高い順にこれらを出力する。画像表示装置60は、このように注目度を設定することにより、ユーザに対して感染リスクが高い状況をいち早く示すことができる。なお、出力部115は、注目度に応じて設定した表示順に応じて複数の画像群を出力するが、出力処理は、ユーザの操作に応じて、順次行われてもよい。
次に、図11を参照して、画像表示装置60が表示する画像の例について説明する。図11は、実施の形態6にかかる画像表示装置60が表示する画像の例を示す図である。
図11は、表示装置が表示する画像201を示している。画像201は、上側に施設内地図が示されている。施設内地図には、カメラ301、302および303の設置位置がそれぞれ示されるとともに、各カメラの撮影範囲として、エリアA、BおよびCが示されている。また、エリアAには、ID#1011と記載されたアイコンが示されている。これは、エリアAにおいてID#1011の画像群が抽出されていることを示している。同様に、エリアBには、ID#1012と記載されたアイコンが示されている。これは、エリアBにおいてID#1012の画像群が抽出されていることを示している。エリアCには、ID#1013と記載されたアイコンが示されている。これは、エリアCにおいてID#1013の画像群が抽出されていることを示している。画像201を視認するユーザは、施設内地図に示されたアイコンを選択することにより、それぞれの動画を再生させることができる。
画像201は、下側に動画リストが示されている。動画リストは、動画のID#1011、#1012および#1013が表示されている。それぞれの動画は、対応する撮影日次と、撮影エリアと、注目度と、がそれぞれ示されている。図11においては、注目度「1」に対応する動画ID#1012は、最も注目度が高い。また注目度「2」に対応する動画ID#1011は、2番目に注目度が高い。また注目度「3」に対応する動画ID#1013は、3番目に注目度が高い。画像201を視認するユーザは、注目度の順に動画を再生できる。またユーザは、注目度に関わらず、選択した動画を再生することができる。
以上、実施の形態6について説明した。画像表示装置60は、注目度を設定することにより、所望の画像群を好適に出力できる。よって、実施の形態6によれば、感染リスクが高い状況を効率的に表示する画像表示装置等を提供することができる。
なお、上述したプログラムは、様々なタイプの非一時的なコンピュータ可読媒体を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体(例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ)、光磁気記録媒体(例えば光磁気ディスク)、CD-ROM(Read Only Memory)CD-R、CD-R/W、半導体メモリ(例えば、マスクROM、PROM(Programmable ROM)、EPROM(Erasable PROM)、フラッシュROM、RAM(Random Access Memory))を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。
なお、本発明は上記実施形態に限られたものではなく、趣旨を逸脱しない範囲で適宜変更することが可能である。
上記の実施形態の一部又は全部は、以下の付記のようにも記載され得るが、以下には限られない。
(付記1)
カメラから複数の画像データを取得する画像データ取得手段と、
前記画像データから人物を特定する特定手段と、
前記画像データから特定した前記人物の感染症の発症可能性を推定する推定手段と、
前記推定の結果に基づいて、前記発症可能性を有する注目人物と当該注目人物の周辺に周辺人物とが含まれる注目画像を検出する注目画像検出手段と、
前記注目画像を含む一連の画像群を抽出して出力する出力手段と、を備える
画像表示装置。
(付記2)
赤外線カメラから熱画像データを取得する熱画像データ取得手段をさらに備え、
前記推定手段は、前記画像データに対応する前記熱画像データから測定した前記人物の体表温度に基づいて前記発症可能性を推定する、
付記1に記載の画像表示装置。
(付記3)
感染症を発症した場合の症状動作を記憶する症状動作記憶手段をさらに備え、
前記推定手段は、特定した前記人物における動作を検出し、検出した前記動作が前記症状動作に一致するか否かを照合することにより前記発症可能性を推定する、
付記1または2に記載の画像表示装置。
(付記4)
前記症状動作記憶手段は、前記人物の咳またはくしゃみ動作を前記症状動作として記憶し、
前記推定手段は、前記人物の咳またはくしゃみ動作を検出する、
付記3に記載の画像表示装置。
(付記5)
前記注目画像検出手段は、前記注目人物と前記周辺人物とが閾値未満の距離に所定期間以上存在する画像を前記注目画像として検出する、
付記1~4のいずれか一項に記載の画像表示装置。
(付記6)
前記注目画像検出手段は、前記注目人物および前記周辺人物の口の動き、マスクの装着、咳、くしゃみ、接触動作の少なくとも1つを含む注目動作を検出し、前記注目動作に基づいて前記注目画像を検出する、
付記1~5のいずれか一項に記載の画像表示装置。
(付記7)
前記注目画像検出手段は、前記画像データにかかる画像における前記人物が含まれる領域の混雑度をさらに加味して前記注目画像を検出する、
付記1~6のいずれか一項に記載の画像表示装置。
(付記8)
前記人物の認証データおよび前記人物の属性データを記憶する認証データ記憶手段をさらに備え、
前記特定手段は前記認証データに基づいて前記人物の認証を併せて行い、
前記注目画像検出手段は、前記属性データに基づいて前記注目画像を検出する、
付記1~7のいずれか一項に記載の画像表示装置。
(付記9)
前記認証データ記憶手段は、前記属性データに前記人物が有する抗体証明データを含み、
前記注目画像検出手段は、前記認証にかかる前記人物の前記抗体証明データを加味して前記注目画像を検出する、
付記8に記載の画像表示装置。
(付記10)
取得する前記画像データの撮影場所に関する感染リスク指数を記憶する指数記憶手段をさらに備え、
前記注目画像検出手段は、取得する前記画像データの撮影場所に関する前記感染リスク指数を加味して前記注目画像を検出する、
付記1~9のいずれか一項に記載の画像表示装置。
(付記11)
前記注目画像検出手段は、予め設定した期間以上の期間を前記注目人物が留まっていた注目領域を検出し、前記注目領域に前記周辺人物が存在している画像を前記注目画像として検出する、
付記1~10のいずれか一項に記載の画像表示装置。
(付記12)
前記画像データの撮影領域における音声データを取得する音声データ取得手段をさらに備え、
前記推定手段は、前記人物が発する音声に基づいて前記発症可能性を推定する、
付記1~11のいずれか一項に記載の画像表示装置。
(付記13)
前記注目画像検出手段は、前記注目人物および前記周辺人物が発する音声に基づいて前記注目画像を検出する、
付記1~12のいずれか一項に記載の画像表示装置。
(付記14)
前記注目画像に対して前記注目人物と前記周辺人物との接触状態に基づいて注目度を設定する注目度設定手段をさらに備え、
前記出力手段は、前記注目度に基づいて、一連の画像群を出力する、
付記1~13のいずれか一項に記載の画像表示装置。
(付記15)
前記注目画像に対して前記周辺人物の感染リスクを推定し、前記感染リスクに基づいて注目度を設定する注目度設定手段をさらに備え、
前記出力手段は、前記注目度に基づいて、一連の画像群を出力する、
付記1~13のいずれか一項に記載の画像表示装置。
(付記16)
前記注目度設定手段は、前記注目度が高いほど表示する前記画像群の優先度を高く設定し、
前記出力手段は、相対的に前記注目度が高い第1注目度に設定された前記画像群を、相対的に前記注目度が低い第2注目度に設定された前記画像群より優先的に出力する、
付記14または15に記載の画像表示装置。
(付記17)
付記1~16のいずれか一項に記載の画像表示装置と、
前記画像データを前記画像データ取得手段に供給するカメラまたは前記出力手段から前記画像群を受け取って表示する表示装置の少なくともいずれか一方と、を備える
画像表示システム。
(付記18)
コンピュータが、
カメラから複数の画像データを取得し、
前記画像データから人物を特定し、
特定した前記人物における感染症の発症可能性を推定し、
前記推定の結果に基づいて、前記発症可能性を有する注目人物と当該注目人物の周辺に周辺人物とが含まれる注目画像を検出し、
前記注目画像を含む一連の画像群を抽出して出力する、
画像表示方法。
(付記19)
コンピュータに、
カメラから複数の画像データを取得する処理と、
前記画像データから人物を特定する処理と、
特定した前記人物における感染症の発症可能性を推定する処理と、
前記推定の結果に基づいて、前記発症可能性を有する注目人物と当該注目人物の周辺に周辺人物とが含まれる注目画像を検出する処理と、
前記注目画像を含む一連の画像群を抽出して出力する処理と、を備える画像表示方法を実行させる
プログラムを、コンピュータに実行させるプログラムが格納された非一時的なコンピュータ可読媒体。
この出願は、2020年12月14日に出願された日本出願特願2020-206504を基礎とする優先権を主張し、その開示の全てをここに取り込む。
1 画像表示システム
10 画像表示装置
20 画像表示装置
30 画像表示装置
40 画像表示装置
50 画像表示装置
60 画像表示装置
111 画像データ取得部
112 特定部
113 推定部
114 注目画像検出部
115 出力部
116 熱画像データ取得部
117 音声データ取得部
118 注目度設定部
120 記憶部
121 症状動作データベース
122 認証データベース
123 指数データベース
200 ディスプレイ
300 可視光カメラ
400 サーマルカメラ
900 施設
N1 ネットワーク
P1 人物
P2 人物

Claims (9)

  1. カメラから複数の画像データを取得する画像データ取得手段と、
    前記画像データから人物を特定する特定手段と、
    前記画像データから特定した前記人物の感染症の発症可能性を推定する推定手段と、
    前記推定の結果に基づいて、前記発症可能性を有する注目人物と当該注目人物の周辺に周辺人物とが含まれる注目画像を検出する注目画像検出手段と、
    感染症の発生にかかる症状動作を記憶する症状動作記憶手段と、を備え、
    前記推定手段は、
    前記特定した人物の動作が前記感染症の発生にかかる症状動作に一致するか否かを照合することにより前記特定した人物の感染症の発生可能性を推定し、
    前記人物の認証データおよび前記人物の属性データを記憶する認証データ記憶手段をさらに備え、
    前記特定手段は、前記認証データに基づいて前記人物の認証を併せて行い、
    前記注目画像検出手段は、前記認証された人物のうち前記周辺人物に該当する人物の前記属性データに基づいて前記注目画像を検出する、
    画像表示装置。
  2. 赤外線カメラから熱画像データを取得する熱画像データ取得手段をさらに備え、
    前記推定手段は、前記画像データに対応する前記熱画像データから測定した前記人物の体表温度に基づいて前記発症可能性を推定する、
    請求項1に記載の画像表示装置。
  3. 前記症状動作記憶手段は、前記人物の咳またはくしゃみ動作を前記症状動作として記憶し、
    前記推定手段は、前記人物の咳またはくしゃみ動作を検出する、
    請求項1に記載の画像表示装置。
  4. 前記注目画像検出手段は、前記注目人物と前記周辺人物とが閾値未満の距離に所定期間以上存在する画像を前記注目画像として検出する、
    請求項1~3のいずれか一項に記載の画像表示装置。
  5. 前記注目画像検出手段は、前記注目人物および前記周辺人物の口の動き、マスクの装着、咳、くしゃみ、接触動作の少なくとも1つを含む注目動作を検出し、前記注目動作に基づいて前記注目画像を検出する、
    請求項1~4のいずれか一項に記載の画像表示装置。
  6. 前記注目画像検出手段は、前記画像データにかかる画像における前記人物が含まれる領域の混雑度をさらに加味して前記注目画像を検出する、
    請求項1~5のいずれか一項に記載の画像表示装置。
  7. 前記認証データ記憶手段は、前記属性データに前記人物が有する抗体証明データを含み、
    前記注目画像検出手段は、前記認証された人物のうち前記周辺人物に該当する人物の前記抗体証明データを加味して前記注目画像を検出する、
    請求項に記載の画像表示装置。
  8. コンピュータが、
    カメラから複数の画像データを取得し、
    前記画像データから人物を特定し、
    特定した前記人物における感染症の発症可能性を推定し、
    前記推定の結果に基づいて、前記発症可能性を有する注目人物と当該注目人物の周辺に周辺人物とが含まれる注目画像を検出し、さらに、
    前記特定した人物の動作が感染症の発生にかかる症状動作に一致するか否かを照合することにより前記特定した人物の感染症の発症可能性を推定し、さらに、
    予め記憶された前記人物の認証データおよび前記人物の属性データを用いて、前記認証データに基づいて前記人物の認証を併せて行い、
    前記認証された人物のうち前記周辺人物に該当する人物の前記属性データに基づいて前記注目画像を検出する、
    画像表示方法。
  9. コンピュータに、
    カメラから複数の画像データを取得する処理と、
    前記画像データから人物を特定する処理と、
    特定した前記人物における感染症の発症可能性を推定する処理と、
    前記推定の結果に基づいて、前記発症可能性を有する注目人物と当該注目人物の周辺に周辺人物とが含まれる注目画像を検出する処理と、を備える画像表示方法を実行させ、さらに、
    前記特定した人物の動作が感染症の発生にかかる症状動作に一致するか否かを照合することにより前記特定した人物の感染症の発症可能性を推定する処理を備える画像表示方法を実行させ、さらに、
    予め記憶された前記人物の認証データおよび前記人物の属性データを用いて、前記認証データに基づいて前記人物の認証を併せて行い、
    前記認証された人物のうち前記周辺人物に該当する人物の前記属性データに基づいて前記注目画像を検出する処理を備える画像表示方法を実行させる、
    プログラムを、コンピュータに実行させるプログラム。
JP2022569762A 2020-12-14 2021-11-05 画像表示装置、画像表示方法およびプログラム Active JP7697477B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2020206504 2020-12-14
JP2020206504 2020-12-14
PCT/JP2021/040795 WO2022130822A1 (ja) 2020-12-14 2021-11-05 画像表示装置、画像表示システム、画像表示方法および非一時的なコンピュータ可読媒体

Publications (3)

Publication Number Publication Date
JPWO2022130822A1 JPWO2022130822A1 (ja) 2022-06-23
JPWO2022130822A5 JPWO2022130822A5 (ja) 2023-08-18
JP7697477B2 true JP7697477B2 (ja) 2025-06-24

Family

ID=82057585

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022569762A Active JP7697477B2 (ja) 2020-12-14 2021-11-05 画像表示装置、画像表示方法およびプログラム

Country Status (3)

Country Link
US (1) US12367988B2 (ja)
JP (1) JP7697477B2 (ja)
WO (1) WO2022130822A1 (ja)

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012235415A (ja) 2011-05-09 2012-11-29 Nec Software Kyushu Ltd 画像処理システム、発熱者特定方法、画像処理装置およびその制御方法と制御プログラム
JP2013176471A (ja) 2012-02-28 2013-09-09 Nikon Corp 情報処理装置
JP2016103786A (ja) 2014-11-28 2016-06-02 日立マクセル株式会社 撮像システム
JP2018036872A (ja) 2016-08-31 2018-03-08 キヤノンマーケティングジャパン株式会社 情報処理装置と、その処理方法及びプログラム
JP2019083395A (ja) 2017-10-30 2019-05-30 パナソニックIpマネジメント株式会社 感染性物質モニタリングシステム、及び、感染性物質モニタリング方法
US20190349554A1 (en) 2010-09-23 2019-11-14 Stryker Corporation Video monitoring system
JP2019200503A (ja) 2018-05-15 2019-11-21 三菱電機ビルテクノサービス株式会社 入退室管理システム及びプログラム
WO2019239813A1 (ja) 2018-06-14 2019-12-19 パナソニックIpマネジメント株式会社 情報処理方法、情報処理プログラム及び情報処理システム
CN111554366A (zh) 2020-03-25 2020-08-18 北京声智科技有限公司 人体健康信息生成方法、装置、计算机设备及存储介质
CN111863272A (zh) 2020-06-11 2020-10-30 浙江大华技术股份有限公司 易感人群的监控方法、系统和计算机设备
JP2022029759A (ja) 2020-08-05 2022-02-18 パナソニックIpマネジメント株式会社 感染情報表示方法
JP2022064128A (ja) 2020-10-13 2022-04-25 キヤノン株式会社 情報処理装置、推定方法、プログラム、記憶媒体および体調管理支援システム。

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003122855A (ja) 2001-10-10 2003-04-25 Teijin Ltd 在宅療法患者救援システム
US20080080748A1 (en) * 2006-09-28 2008-04-03 Kabushiki Kaisha Toshiba Person recognition apparatus and person recognition method
JP2016125956A (ja) * 2015-01-07 2016-07-11 ソニー株式会社 情報処理装置、情報処理方法、および情報処理システム
JP2016184196A (ja) 2015-03-25 2016-10-20 テルモ株式会社 院内感染影響範囲閲覧システムおよび院内感染影響範囲表示方法
US11903680B2 (en) * 2015-06-14 2024-02-20 Facense Ltd. Wearable-based health state verification for physical access authorization
JP6626344B2 (ja) * 2015-09-29 2019-12-25 キヤノン株式会社 画像処理装置、画像処理装置の制御方法およびプログラム
JP6948128B2 (ja) * 2017-01-13 2021-10-13 キヤノン株式会社 映像監視装置及びその制御方法及びシステム
JP6955150B2 (ja) 2017-08-18 2021-10-27 富士通株式会社 管理プログラム、管理装置及び管理方法
WO2021184071A1 (en) * 2020-03-17 2021-09-23 Elenium Automation Pty Ltd "self-service station having thermal imaging camera"
US20210327562A1 (en) * 2020-04-20 2021-10-21 PredictMedix Inc. Artificial intelligence driven rapid testing system for infectious diseases
JP7817818B2 (ja) * 2020-12-08 2026-02-19 キヤノンメディカルシステムズ株式会社 医用情報処理装置
US12505655B2 (en) * 2022-06-09 2025-12-23 Young-Jin Cha Computer-implemented methods for analyzing thermographic image having article of interest using machine learning and for training machine learning algorithm therefor

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190349554A1 (en) 2010-09-23 2019-11-14 Stryker Corporation Video monitoring system
JP2012235415A (ja) 2011-05-09 2012-11-29 Nec Software Kyushu Ltd 画像処理システム、発熱者特定方法、画像処理装置およびその制御方法と制御プログラム
JP2013176471A (ja) 2012-02-28 2013-09-09 Nikon Corp 情報処理装置
JP2016103786A (ja) 2014-11-28 2016-06-02 日立マクセル株式会社 撮像システム
JP2018036872A (ja) 2016-08-31 2018-03-08 キヤノンマーケティングジャパン株式会社 情報処理装置と、その処理方法及びプログラム
JP2019083395A (ja) 2017-10-30 2019-05-30 パナソニックIpマネジメント株式会社 感染性物質モニタリングシステム、及び、感染性物質モニタリング方法
JP2019200503A (ja) 2018-05-15 2019-11-21 三菱電機ビルテクノサービス株式会社 入退室管理システム及びプログラム
WO2019239813A1 (ja) 2018-06-14 2019-12-19 パナソニックIpマネジメント株式会社 情報処理方法、情報処理プログラム及び情報処理システム
CN111554366A (zh) 2020-03-25 2020-08-18 北京声智科技有限公司 人体健康信息生成方法、装置、计算机设备及存储介质
CN111863272A (zh) 2020-06-11 2020-10-30 浙江大华技术股份有限公司 易感人群的监控方法、系统和计算机设备
JP2022029759A (ja) 2020-08-05 2022-02-18 パナソニックIpマネジメント株式会社 感染情報表示方法
JP2022064128A (ja) 2020-10-13 2022-04-25 キヤノン株式会社 情報処理装置、推定方法、プログラム、記憶媒体および体調管理支援システム。

Also Published As

Publication number Publication date
US20240038403A1 (en) 2024-02-01
US12367988B2 (en) 2025-07-22
JPWO2022130822A1 (ja) 2022-06-23
WO2022130822A1 (ja) 2022-06-23

Similar Documents

Publication Publication Date Title
CN111742376B (zh) 信息处理方法、信息处理程序以及信息处理系统
US8208028B2 (en) Object verification device and object verification method
US10997398B2 (en) Information processing apparatus, authentication system, method of controlling same, and medium
JP6769475B2 (ja) 情報処理システム、認証対象の管理方法、及びプログラム
JP7009021B2 (ja) 異常者予知システム、異常者予知方法、およびプログラム
JP2022117996A (ja) 情報処理装置、データ生成方法、及びプログラム
US10200607B2 (en) Image capturing apparatus, method of controlling the same, monitoring camera system, and storage medium
JP5648452B2 (ja) 画像処理プログラムおよび画像処理装置
US20220019811A1 (en) Information processing apparatus, information processing method, and storage medium
JP7697477B2 (ja) 画像表示装置、画像表示方法およびプログラム
JP7416253B2 (ja) 会話監視装置、制御方法、及びプログラム
JP2010262527A (ja) 通行者計数装置、通行者計数方法および通行者計数プログラム
JP5618366B2 (ja) 監視システム、監視装置、監視方法、及びプログラム
WO2022014026A1 (ja) 温度管理装置、システム、方法及びプログラムが格納された非一時的なコンピュータ可読媒体
JP7517422B2 (ja) 会話監視装置、制御方法、及びプログラム
US12561980B2 (en) Nuisance degree-decision system, information presentation system, information presentation method, and computer readable medium
JP7605223B2 (ja) リスク値算出装置、リスク値算出方法及びリスク値算出プログラム
JP7347481B2 (ja) 情報処理装置、情報処理方法、及びプログラム
JPWO2014006859A1 (ja) 位置管理装置、位置管理システム、位置管理方法、及び、位置管理プログラム
WO2022201793A1 (ja) 情報処理装置、情報処理システム、情報処理方法およびコンピュータ可読媒体
JP2021007028A (ja) 情報処理システム、認証対象の管理方法、及びプログラム
JP7679840B2 (ja) リスク情報生成プログラム、リスク情報生成方法、リスク情報生成装置、及びリスク情報生成システム
JP7578144B2 (ja) 観客監視装置、観客監視システム、観客監視方法及び観客監視プログラム
JP7521615B2 (ja) 情報処理装置、情報処理システム、情報処理方法およびプログラム
JP7327571B2 (ja) 情報処理システム、端末装置、認証対象の管理方法、及びプログラム

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230602

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230602

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240730

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240930

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20241224

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20250221

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20250513

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20250526

R150 Certificate of patent or registration of utility model

Ref document number: 7697477

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150