JPWO2017061239A1 - 監視システム - Google Patents
監視システム Download PDFInfo
- Publication number
- JPWO2017061239A1 JPWO2017061239A1 JP2017544429A JP2017544429A JPWO2017061239A1 JP WO2017061239 A1 JPWO2017061239 A1 JP WO2017061239A1 JP 2017544429 A JP2017544429 A JP 2017544429A JP 2017544429 A JP2017544429 A JP 2017544429A JP WO2017061239 A1 JPWO2017061239 A1 JP WO2017061239A1
- Authority
- JP
- Japan
- Prior art keywords
- image
- terminal device
- imaging device
- distribution
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 97
- 238000003384 imaging method Methods 0.000 claims abstract description 95
- 238000000034 method Methods 0.000 description 52
- 230000008569 process Effects 0.000 description 38
- 238000001514 detection method Methods 0.000 description 18
- 238000012545 processing Methods 0.000 description 12
- 238000004364 calculation method Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 6
- 230000005540 biological transmission Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 4
- 210000000056 organ Anatomy 0.000 description 3
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 210000001061 forehead Anatomy 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 210000003128 head Anatomy 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000002265 prevention Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 235000002673 Dioscorea communis Nutrition 0.000 description 1
- 241000544230 Dioscorea communis Species 0.000 description 1
- 208000035753 Periorbital contusion Diseases 0.000 description 1
- 206010038743 Restlessness Diseases 0.000 description 1
- 238000012508 change request Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012806 monitoring device Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Business, Economics & Management (AREA)
- Emergency Management (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Closed-Circuit Television Systems (AREA)
- Studio Devices (AREA)
Abstract
Description
近年、治安の悪化や社会不安の高まり、監視カメラの低価格化とともに、上述のような施設のみならず、商店街や繁華街の街頭、住宅地内の生活道路にまで、このような監視システムが設置されるケースが増加している。
また、他の先行技術文献としては、例えば、特許文献2に、人物の振り向きざまの表情を撮り逃すことがなく、ベストショットを確実に記録する発明が開示されている。
本発明の目的は、ネットワーク流量を低減することである。
図1は本発明の一実施例に係る監視システムの構成を示す図である。
図1において、監視システムは、ネットワーク100、監視撮像装置101〜105、端末装置106、ユーザ撮像装置107で構成されている。
監視撮像装置101〜105は、遠近制御やピント制御が可能なズームレンズや、CCDやCMOS等の撮像素子、アナログ信号をデジタル変換するA/D回路、RAM等の一時記憶メモリ、データ伝送バス、タイミング回路、外部入出力インタフェース、電源回路、パンやチルト等を行う雲台、可視光ライトや近赤外LED(Light Emitting Diode)等の照明等を備える監視カメラ等の装置である。
端末装置106は、ネットワーク100から外部入出力インタフェースに入力された監視撮像装置101〜105からの画像データを一時記憶メモリに格納する。格納された画像データを、演算回路を使い、表示に適した形態に変換を加え、画面表示する。記録媒体には、本発明の方式を含むソフトウェア一式や、OS(オペレーションシステム)等が格納されている。また、本端末装置106に対するユーザ操作は、ユーザ入力機器に対して行われる。
ユーザ撮像装置107は、ユーザ(監視者)の顔を正面から撮影可能な位置、例えば、端末装置106の画面近傍に配置されるものとする。
端末装置106は、配信指示部200、監視画像受信部201、画面表示部202、ユーザ画像取得部203、顔検出部204、注視判定部205、判定結果保持部206、制御部207で構成されている。
監視画像受信部201は、監視撮像装置からの監視画像取得を行う機能部である。本実施例では、監視撮像装置101〜105から入力された画像データの受信を行う。
ユーザ画像取得部203は、ユーザ撮像装置からのユーザ(監視者)画像の取得を行う機能部である。本実施例では、ユーザ撮像装置107から画像データの取得を行う。
顔検出部204は、ユーザ画像中から監視者の顔を検出する機能部である。本実施例では、ユーザ画像取得部203にて取得した画像データに対し画像認識技術を用いた顔検出を行い、監視者の存在を判定し、監視者が存在する場合にはその領域座標出力を行う。
判定結果保持部206は、注視判定部205にて判定した結果を所定時間保持する機能部である。本実施例では、注視判定部205にて判定した結果をその判定時刻とともに一時記憶メモリに保持する。保持時間は予め設定として与え、保持時間を越えた結果については破棄をする。保持の態様についてはどのようであってもよい。
制御部207は、端末装置106の各機能部の制御を行う機能部である。
図3は本発明の一実施例に係る監視システムの配信指示部における配信指示データの態様を示す図である。
配信指示データ300は、1種類の配信指示を1レコードとして保管する。本実施例では、レコード301〜307の7個のレコード、すなわち7種類の配信指示が保管できるようになっている。本データは予め設定しておくものとする。
レコードは、頻度セル310、配信フレームレートセル311、画質セル312で構成される。
頻度セル310は、注視頻度の範囲を格納する領域である。注視頻度は一定時間、例えば、1分間における注視の回数である。本例では、具体的な数値を示していないが、レコード301に格納された範囲が、最も高頻度であり、レコード307に格納された値が最も低頻度であるとする。
画質セル312は、画質を格納する領域である。画質は、例えば、画像の解像度や圧縮率、あるいはそれらの組合せで構成する。本実施例では、具体的な数値を示していないが、レコード301に格納された値が最も高画質であり、レコード307に格納された値が最も低画質であるとする。
図4は本発明の一実施例に係る監視システムの端末装置における処理の流れを説明するためのフローチャートである。
端末装置106における処理は、図4(A)と図4(B)で構成されている。
図4(B)の処理は監視撮像装置101〜105毎に行われる処理である。図1のシステム構成において、端末装置106は内部にて、図4(A)の処理が1つと、図4(B)の処理が5つの合計6つの処理が並列実行される形となる。
ステップ400において、端末装置106の制御部207は、所定時間の待機を行う。待機時間の長さは予め設定する。所定時間経過後に、処理をステップ401に進める。
ステップ401において、端末装置106のユーザ画像取得部203は、ユーザ撮像装置107からのユーザ画像取得を行う。
顔検出部204は、ステップ402の判定で、顔を検出した場合(YES)にはステップ403の処理に進み、顔を検出しない場合(NO)にはステップ400の処理に戻る。
ステップ404において、端末装置106の注視判定部205は、視線方向の検出を行う。視線方向の検出は、ステップ403で求めた器官の位置関係から顔向きを推定し、顔向きと黒目の位置関係から求める方法等により行う。本発明ではいずれの方法であってもよい。
ステップ406において、端末装置106の判定結果保持部206は、ステップ405で求めた判定結果と判定時刻を保管(記憶)する。
ステップ410において、端末装置106の配信指示部200は、監視撮像装置に対して、画像配信の要求を送信する。その際、要求する配信フレームレートや画質は、配信指示データ300から、デフォルトとして、例えば、レコード304に格納された値を取り出すものとする。本ステップで指示した配信フレームレートや画質について、現配信条件として保管(記憶)しておく。
ステップ412において、端末装置106の監視画像受信部201は、監視撮像装置からの監視画像を受信する。
ステップ416において、端末装置106の配信指示部200は、監視撮像装置に対して、画像配信の変更要求を送信する。その際、要求する配信フレームレートや画質は、ステップ414で取り出した値とする。本ステップで指示した配信フレームレートや画質について、現配信条件として保管しておく。処理後、ステップ411の処理に戻る。
なお、ここまでの説明においては、説明の簡略化のため、監視撮像装置を5台、端末装置を1台の構成で示したが、これらはネットワークに対し、上記以外の台数の構成であってもよい。
図5は本発明の他の一実施例に係る監視システムの構成を示す図である。
図5において、図1と同一の符号の装置は、同一の装置を示す。
監視システムは、ネットワーク100、監視撮像装置101〜105、端末装置506、ユーザ撮像装置107で構成されている。
ユーザ撮像装置107は、ユーザ(監視者)の顔を正面から撮影可能な位置、例えば、端末装置506の画面近傍に配置されるものとする。
図6は本発明の他の一実施例に係る監視システムの機能構成を示す図である。
図6において、図1や図2、図5と同一の符号は、同一の装置を示す。
端末装置506は、配信指示部200、監視画像受信部201、画面表示部202、ユーザ画像取得部203、顔検出部204、顔特徴量算出部608、人物識別部609、人物記録部610、制御部611の各機能部で構成されている。
人物識別部609は、顔検出部204で検出した監視者に対する人物識別を、顔特徴量算出部608で求めた特徴量を人物記録部610に格納されたデータベースに照合することにより判定する機能部である。
また、人物記録部610には、監視撮像装置101〜105に対する配信条件を人物毎に記録しておく。ここで配信条件とは、配信フレームレートや画質等で構成される。人物データは、事前に与えられておくものとし、その与え方はどのようであってもよい。人物データの態様については後述する。
制御部611は、端末装置506の各機能部の制御を行う機能部である。
図7は本発明の他の一実施例に係る監視システムの人物記録部における人物データの態様を示す図である。
人物データ700は、人物1名の情報を1個のレコードとして記録する。本実施例は、監視者3名の情報、すなわち3個のレコードが記録されている状態を示し、レコード701〜703で構成される。本データは予め設定しておく。
レコード番号セル710は、レコード番号を格納する領域である。レコード番号は、レコードの管理をするために用いる番号であり、例えば、レコード毎にユニークに振られる連続整数値である。
特徴量セル712は、監視者の人物特徴量を格納する領域である。本実施例では、説明の容易さのため、1次元値としての小数値が格納された例を示すが、多次元値を用いるようにしてもよい。
図8は本発明の他の一実施例に係る監視システムの端末装置における処理の流れを説明するためのフローチャートである。
端末装置506における処理は、図8(A)と図(B)で構成されている。図8(B)の処理は監視撮像装置毎に行われる処理であるため、5台の監視撮像装置を示した図5のシステム構成においては、端末装置506の内部にて、図8(A)の処理が1つと、図(B)の処理が5つの合計6つの処理が並列実行される形となる。
ステップ800において、端末装置506の制御部611は、所定時間の待機を行う。待機時間の長さは予め設定する。所定時間経過後に、処理をステップ801に進める。
ステップ801において、端末装置506のユーザ画像取得部203は、ユーザ撮像装置107からのユーザ画像取得を行う。
顔検出部204は、ステップ802の判定で、顔を検出した場合(YES)にはステップ803に進み、顔を検出しない場合(NO)にはステップ808の処理に進む。
ステップ804において、端末装置506の顔特徴量算出部608は、ステップ802で求めた顔領域に対し、特徴量算出を行う。
ここで算出する特徴量には、例えば、頭髪や皮膚の色、顔の輪郭の形状や方向、目や鼻、口といった主要構成要素の大きさ・形状や配置関係等々の画像特徴量が挙げられるが、本発明の他の一実施例においては使用する特徴量の種類や数はいずれであってもよい。
人物識別部609は、ステップ806の処理で、監視者有りの場合(YES)にはステップ807の処理に進み、監視者なしの場合(NO)にはステップ808の処理に進む。
ステップ808において、端末装置506の制御部611は、監視者なしフラグをONにし、監視者IDをクリアした上で、ステップ800の処理に戻る。
ステップ810において、端末装置506の制御部611は、所定時間の待機を行う。待機時間の長さは予め設定する。所定時間経過後に、ステップ811の処理に進む。
ステップ811において、端末装置506の制御部611は、監視者なしフラグがONであるか否かを判定し、監視者なしフラグがOFFである場合(NO)には、ステップ812の処理に進み、監視者なしフラグがONである場合(YES)にはステップ810の処理に戻る。
ステップ813において、端末装置506の制御部611は、配信条件の取得を行う。人物記録部610に格納された人物データ700の中から監視者IDと人物IDが一致するレコードを特定する。そして、一致レコードの配信フレームレートセルと画質セルから、配信フレームレート値と画質値を取り出す。
ステップ815において、端末装置506の監視画像受信部201は、画像受信待機を行う。監視撮像装置からの画像着信を検知すると処理はステップ816に進む。
ステップ816において、端末装置506の監視画像受信部201は、監視撮像装置からの監視画像を受信する。
また、監視映像の配信元を撮像装置とした構成で示したが、録画装置や再配信装置とした構成であってもよい。
また、人物識別に掛かる処理を端末装置上にて実施する構成にて示したが、別個の装置、例えば、サーバ装置にて実施するようにしてもよい。
さらに、本発明の第1の形態と第2の形態を別個の実施例として示したが、第1の形態と第2の形態を組み合わせて実施するようにしてもよい。
Claims (2)
- 撮像装置とユーザ撮像装置と端末装置を備えた監視システムであって、
前記撮像装置は、配信画像の画質やフレームレートを変更する手段を有し、
前記ユーザ撮像装置は、前記端末装置の監視者を撮影し、
前記端末装置は、前記ユーザ撮像装置の撮影画像から監視者の画像に対する注視頻度を取得する手段と、前記注視頻度に基づき配信画像の画質またはフレームレートを決定する手段と、該決定した結果に基づき前記撮像装置への配信指示を出す手段とを有することを特徴とする監視システム。 - 撮像装置とユーザ撮像装置と端末装置を備えた監視システムであって、
前記撮像装置は、配信画像の画質やフレームレートを変更する手段を有し、
前記ユーザ撮像装置は、前記端末装置の監視者を撮影し、
前記端末装置は、前記撮像装置からの配信画像を画面表示する手段と、前記ユーザ撮像装置の撮影画像から監視者の個人識別を行う手段と、前記個人識別結果に基づき配信画像の画質やフレームレートを決定する手段と、該決定した結果に基づき前記撮像装置への配信指示を出す手段とを有することを特徴とする監視システム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015201025 | 2015-10-09 | ||
JP2015201025 | 2015-10-09 | ||
PCT/JP2016/076955 WO2017061239A1 (ja) | 2015-10-09 | 2016-09-13 | 監視システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2017061239A1 true JPWO2017061239A1 (ja) | 2018-07-12 |
JP6632632B2 JP6632632B2 (ja) | 2020-01-22 |
Family
ID=58487501
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017544429A Active JP6632632B2 (ja) | 2015-10-09 | 2016-09-13 | 監視システム |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP6632632B2 (ja) |
WO (1) | WO2017061239A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021034866A (ja) * | 2019-08-23 | 2021-03-01 | キヤノン株式会社 | 表示制御装置およびその制御方法 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7252107B2 (ja) * | 2019-09-25 | 2023-04-04 | 株式会社日立国際電気 | 監視システム及び監視方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008072447A (ja) * | 2006-09-14 | 2008-03-27 | Fujitsu Ltd | 画像配信システム、画像配信プログラム、画像配信方法 |
JP2008167101A (ja) * | 2006-12-28 | 2008-07-17 | Hitachi Ltd | 監視用映像記録装置 |
JP2008219484A (ja) * | 2007-03-05 | 2008-09-18 | Victor Co Of Japan Ltd | 監視用カメラ、表示制御装置、および監視システム |
JP2010233114A (ja) * | 2009-03-27 | 2010-10-14 | Sogo Keibi Hosho Co Ltd | 監視システム及び監視システムの画像転送方法 |
JP2011199737A (ja) * | 2010-03-23 | 2011-10-06 | Hitachi Ltd | 監視映像記録装置、監視映像記録方法およびプログラム |
-
2016
- 2016-09-13 WO PCT/JP2016/076955 patent/WO2017061239A1/ja active Application Filing
- 2016-09-13 JP JP2017544429A patent/JP6632632B2/ja active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008072447A (ja) * | 2006-09-14 | 2008-03-27 | Fujitsu Ltd | 画像配信システム、画像配信プログラム、画像配信方法 |
JP2008167101A (ja) * | 2006-12-28 | 2008-07-17 | Hitachi Ltd | 監視用映像記録装置 |
JP2008219484A (ja) * | 2007-03-05 | 2008-09-18 | Victor Co Of Japan Ltd | 監視用カメラ、表示制御装置、および監視システム |
JP2010233114A (ja) * | 2009-03-27 | 2010-10-14 | Sogo Keibi Hosho Co Ltd | 監視システム及び監視システムの画像転送方法 |
JP2011199737A (ja) * | 2010-03-23 | 2011-10-06 | Hitachi Ltd | 監視映像記録装置、監視映像記録方法およびプログラム |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021034866A (ja) * | 2019-08-23 | 2021-03-01 | キヤノン株式会社 | 表示制御装置およびその制御方法 |
Also Published As
Publication number | Publication date |
---|---|
JP6632632B2 (ja) | 2020-01-22 |
WO2017061239A1 (ja) | 2017-04-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2021232587A1 (zh) | 基于图像处理的双光摄像机测温方法及相关设备 | |
JP5567853B2 (ja) | 画像認識装置および方法 | |
CN110089104B (zh) | 事件存储装置、事件搜索装置和事件警报装置 | |
JP5213105B2 (ja) | 映像ネットワークシステム及び映像データ管理方法 | |
TWI430186B (zh) | 影像處理裝置及影像處理方法 | |
US8314854B2 (en) | Apparatus and method for image recognition of facial areas in photographic images from a digital camera | |
JP6139364B2 (ja) | 人物特定装置、人物特定方法及びプログラム | |
JP6077655B2 (ja) | 撮影システム | |
JP5669082B2 (ja) | 照合装置 | |
KR20120140184A (ko) | 얼굴 화상 검색 시스템 및 얼굴 화상 검색 방법 | |
US20190147251A1 (en) | Information processing apparatus, monitoring system, method, and non-transitory computer-readable storage medium | |
JP6503079B2 (ja) | 特定人物検知システム、特定人物検知方法および検知装置 | |
KR102249498B1 (ko) | 이벤트 검색 장치 및 시스템 | |
CN210515326U (zh) | 基于人脸ai识别的景区票证稽查系统 | |
JP2011060058A (ja) | 撮影装置および監視システム | |
CN108289191B (zh) | 图像识别方法及装置 | |
JP5865584B2 (ja) | 特定人物検知システムおよび検知方法 | |
JP5088463B2 (ja) | 監視システム | |
US10783365B2 (en) | Image processing device and image processing system | |
WO2017061239A1 (ja) | 監視システム | |
CN112488647B (zh) | 考勤系统及方法、存储介质及电子设备 | |
CN113409056A (zh) | 支付方法、装置、本地识别设备、人脸支付系统及设备 | |
JP2019029747A (ja) | 画像監視システム | |
JP2015139001A (ja) | 情報処理装置、情報処理方法及びプログラム | |
WO2022057329A1 (zh) | 安全监控方法、装置、系统和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180319 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180319 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190530 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190726 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20191121 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20191210 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6632632 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |