JP6182607B2 - 映像監視システム、監視装置 - Google Patents
映像監視システム、監視装置 Download PDFInfo
- Publication number
- JP6182607B2 JP6182607B2 JP2015522362A JP2015522362A JP6182607B2 JP 6182607 B2 JP6182607 B2 JP 6182607B2 JP 2015522362 A JP2015522362 A JP 2015522362A JP 2015522362 A JP2015522362 A JP 2015522362A JP 6182607 B2 JP6182607 B2 JP 6182607B2
- Authority
- JP
- Japan
- Prior art keywords
- conversion
- camera
- feature amount
- virtual
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000006243 chemical reaction Methods 0.000 claims description 109
- 238000000034 method Methods 0.000 claims description 90
- 238000012544 monitoring process Methods 0.000 claims description 65
- 238000009434 installation Methods 0.000 claims description 37
- 238000000605 extraction Methods 0.000 claims description 34
- 230000000007 visual effect Effects 0.000 claims description 7
- 239000000284 extract Substances 0.000 claims description 6
- 230000008569 process Effects 0.000 description 23
- 238000010586 diagram Methods 0.000 description 22
- 239000013598 vector Substances 0.000 description 10
- 239000011159 matrix material Substances 0.000 description 6
- 230000006870 function Effects 0.000 description 5
- 230000009466 transformation Effects 0.000 description 5
- 238000012806 monitoring device Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/292—Multi-camera tracking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/10—Terrestrial scenes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30232—Surveillance
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Closed-Circuit Television Systems (AREA)
- Image Analysis (AREA)
Description
(図6:ステップS601〜S602)
仮想視点生成部203は、仮想設置状態情報201が設定されると(S601)、全てのカメラについて以下に説明するステップS603〜S604を実施する(S602)。
(図6:ステップS603〜S604)
仮想視点生成部203は、監視カメラの設置情報202からカメラの視線と地面の交点を算出する(S603)。次に、得られた交点を用いて仮想視点位置を算出する(S604)。
図7は、特徴量変換部207における特徴量変換処理の処理フロー図である。特徴量変換処理では、最初に変換方法を取得する(S701)。次に、特徴量を取得する(S702)。次に、特徴量の3次元位置を推定する(S703)。次に、(S701)にて取得した変換方法に基づき、特徴量を変換し(S704)、特徴量変換処理を終了する。
102:監視カメラ、
104:動き特徴量、
106:仮想設置状態、
107:仮想視点、
109:変換後の動き特徴量、
111:データベース、
200:映像監視装置、
201:仮想設置状態情報、
202:監視カメラ設置情報、
203:仮想視点生成部、
204:変換方法決定部、
205:監視カメラからの映像、
206:動き特徴量抽出部、
207:特徴量変換部、
208:特徴量解析部、
209:解析結果提示部、
210:仮想視点情報、
211:変換方法、
801:演算処理装置、
802:記録装置、
803:入出力装置、
804:ユーザインターフェース、
805:表示装置、
806:監視カメラ、
807:録画装置、
901:映像解析サーバー、
902:監視モニター、
904、906、909:ネットワーク、
907:仮想設置状態情報設定クライアント、
1001:仮想設置状態入力ウィンドウ。
Claims (13)
- 複数のカメラからの映像を受信し、前記映像を構成する複数のフレームから動き特徴量を抽出する抽出部と、
前記抽出部からの抽出結果を蓄積する記憶部と、
抽出した前記動き特徴量を変換する変換部と、
変換後の前記動き特徴量を解析する解析部と、を有し、
前記変換部は、複数のカメラの座標軸とは異なる仮想座標軸を保持し、仮想座標軸系における仮想視点を計算することにより特徴量を変換することを特徴とする映像監視システム。 - 請求項1に記載の映像監視システムであって、
前記変換部は、
前記カメラの設置情報から、それぞれの前記カメラの視線軸と地面との交点の位置を算出し、前記交点が視線の中心となる前記カメラの位置のうち仮想的な前記カメラの設置状態と実際の前記カメラの設置状態とが一致する位置を前記仮想視点として生成する
ことを特徴とする映像監視システム。 - 請求項1に記載の映像監視システムであって、
前記変換部は、
前記抽出部が抽出した前記動き特徴量の実空間上の3次元位置を推定する3次元位置推定部と、
前記仮想視点を用いて前記動き特徴量の変換に用いる変換方法を決定する変換方法決定部と、
推定された前記3次元位置と、決定された変換方法を用いて、前記動き特徴量の座標変換を行う座標変換部と、をさらに有する
ことを特徴とする映像監視システム。 - 請求項3に記載の映像監視システムであって、
複数の前記変換部と、
前記解析部からの解析結果を提示する提示部と、をさらに備え
前記提示部で提示する解析結果を、制御信号によって切り替える
ことを特徴とする映像監視システム。 - 請求項2に記載の映像監視システムであって、
入力された道路情報から白線の位置を抽出し、前記交点と最も近い白線上の点を算出し、前記白線上の点が視線の中心となるカメラの位置のうち仮想的な設置状態と実際の前記カメラの設置状態とが一致する位置を仮想視点として生成する
ことを特徴とする映像監視システム。 - 請求項1記載の映像監視システムであって、
前記変換部で用いる前記仮想視点を設定するユーザインターフェースと、をさらに有する
ことを特徴とする映像監視システム。 - 複数のカメラからの映像を受信し、前記映像を構成する複数のフレームから動き特徴量を抽出する抽出ステップと、
前記抽出ステップからの抽出結果を蓄積する記憶ステップと、
抽出した前記動き特徴量を変換する変換ステップと、
変換後の前記動き特徴量を解析する解析ステップと、を有し、
前記変換ステップは、複数のカメラの座標軸とは異なる仮想座標軸を保持し、仮想座標軸系における仮想視点を計算することにより特徴量を変換することを特徴とする映像監視方法。 - 請求項7に記載の映像監視方法であって、
前記変換ステップは、
前記カメラの設置情報から、それぞれの前記カメラの視線軸と地面との交点の位置を算出し、前記交点が視線の中心となる前記カメラの位置のうち仮想的な前記カメラの設置状態と実際の前記カメラの設置状態とが一致する位置を前記仮想視点として生成する
ことを特徴とする映像監視方法。 - 請求項7に記載の映像監視方法であって、
前記変換ステップは、
前記抽出ステップが抽出した前記動き特徴量の実空間上の3次元位置を推定する3次元位置推定ステップと、
前記仮想視点を用いて前記動き特徴量の変換に用いる変換方法を決定する変換方法決定ステップと、
推定された前記3次元位置と、決定された変換方法を用いて、前記動き特徴量の座標変換を行う座標変換ステップと、をさらに有する
ことを特徴とする映像監視方法。 - 請求項9に記載の映像監視方法であって、
複数の前記変換ステップと、
前記解析ステップによる解析結果を提示する提示ステップと、をさらに備え
前記提示ステップで提示する解析結果を、制御信号によって切り替える
ことを特徴とする映像監視方法。 - コンピュータに以下のステップを実現させるためのプログラムを記録したコンピュータ読み取り可能な情報記録媒体であって、
複数のカメラからの映像を受信し、前記映像を構成する複数のフレームから動き特徴量を抽出する抽出ステップと、
前記抽出ステップからの抽出結果を蓄積する記憶ステップと、
抽出した前記動き特徴量を変換する変換ステップと、
変換後の前記動き特徴量を解析する解析ステップと、を有し、
前記変換ステップは、複数のカメラの座標軸とは異なる仮想座標軸を保持し、仮想座標軸系における仮想視点を計算することにより特徴量を変換すること
を特徴とするプログラムが記録されている情報記録媒体。 - 請求項11に記載の情報記録媒体であって、
前記変換ステップは、
前記カメラの設置情報から、それぞれの前記カメラの視線軸と地面との交点の位置を算出し、前記交点が視線の中心となる前記カメラの位置のうち仮想的な前記カメラの設置状態と実際の前記カメラの設置状態とが一致する位置を前記仮想視点として生成する
ことを特徴とするプログラムが記録されている情報記録媒体。 - 請求項11に記載の情報記録媒体であって、
前記変換ステップは、
前記抽出ステップが抽出した前記動き特徴量の実空間上の3次元位置を推定する3次元位置推定ステップと、
前記仮想視点を用いて前記動き特徴量の変換に用いる変換方法を決定する変換方法決定ステップと、
推定された前記3次元位置と、決定された変換方法を用いて、前記動き特徴量の座標変換を行う座標変換ステップと、をさらに有する
ことを特徴とするプログラムが記録された情報記録媒体。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2013/066418 WO2014199505A1 (ja) | 2013-06-14 | 2013-06-14 | 映像監視システム、監視装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2014199505A1 JPWO2014199505A1 (ja) | 2017-02-23 |
JP6182607B2 true JP6182607B2 (ja) | 2017-08-16 |
Family
ID=52021835
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015522362A Active JP6182607B2 (ja) | 2013-06-14 | 2013-06-14 | 映像監視システム、監視装置 |
Country Status (6)
Country | Link |
---|---|
US (1) | US10491863B2 (ja) |
EP (1) | EP3010229B1 (ja) |
JP (1) | JP6182607B2 (ja) |
CN (1) | CN105284108B (ja) |
DK (1) | DK3010229T3 (ja) |
WO (1) | WO2014199505A1 (ja) |
Families Citing this family (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6539253B2 (ja) * | 2016-12-06 | 2019-07-03 | キヤノン株式会社 | 情報処理装置、その制御方法、およびプログラム |
WO2018123801A1 (ja) * | 2016-12-28 | 2018-07-05 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 三次元モデル配信方法、三次元モデル受信方法、三次元モデル配信装置及び三次元モデル受信装置 |
JP6815935B2 (ja) * | 2017-06-05 | 2021-01-20 | 日立オートモティブシステムズ株式会社 | 位置推定装置 |
JP6482696B2 (ja) | 2017-06-23 | 2019-03-13 | キヤノン株式会社 | 表示制御装置、表示制御方法、およびプログラム |
JP2019102907A (ja) * | 2017-11-30 | 2019-06-24 | キヤノン株式会社 | 設定装置、設定方法、及びプログラム |
US11113887B2 (en) * | 2018-01-08 | 2021-09-07 | Verizon Patent And Licensing Inc | Generating three-dimensional content from two-dimensional images |
JP7164968B2 (ja) * | 2018-05-07 | 2022-11-02 | キヤノン株式会社 | 画像処理装置、画像処理装置の制御方法及びプログラム |
JP7277085B2 (ja) * | 2018-07-04 | 2023-05-18 | キヤノン株式会社 | 情報処理装置、情報処理方法及びプログラム |
JP7123736B2 (ja) * | 2018-10-23 | 2022-08-23 | キヤノン株式会社 | 画像処理装置、画像処理方法、およびプログラム |
JP7423196B2 (ja) * | 2019-05-09 | 2024-01-29 | キヤノン株式会社 | 撮像装置、撮像システム、およびその制御方法 |
JP7358078B2 (ja) * | 2019-06-07 | 2023-10-10 | キヤノン株式会社 | 情報処理装置、情報処理装置の制御方法、及び、プログラム |
JP2021179728A (ja) * | 2020-05-12 | 2021-11-18 | 株式会社日立製作所 | 映像処理装置、及び、その方法 |
JP7482011B2 (ja) * | 2020-12-04 | 2024-05-13 | 株式会社東芝 | 情報処理システム |
Family Cites Families (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5850352A (en) * | 1995-03-31 | 1998-12-15 | The Regents Of The University Of California | Immersive video, including video hypermosaicing to generate from multiple video views of a scene a three-dimensional video mosaic from which diverse virtual video scene images are synthesized, including panoramic, scene interactive and stereoscopic images |
US5912700A (en) * | 1996-01-10 | 1999-06-15 | Fox Sports Productions, Inc. | System for enhancing the television presentation of an object at a sporting event |
US6567116B1 (en) * | 1998-11-20 | 2003-05-20 | James A. Aman | Multiple object tracking system |
US7796162B2 (en) * | 2000-10-26 | 2010-09-14 | Front Row Technologies, Llc | Providing multiple synchronized camera views for broadcast from a live venue activity to remote viewers |
US6816185B2 (en) * | 2000-12-29 | 2004-11-09 | Miki Harmath | System and method for judging boundary lines |
JP3814779B2 (ja) * | 2001-03-27 | 2006-08-30 | 三菱電機株式会社 | 侵入者自動追尾方法および装置並びに画像処理装置 |
US7143083B2 (en) * | 2001-06-12 | 2006-11-28 | Lucent Technologies Inc. | Method and apparatus for retrieving multimedia data through spatio-temporal activity maps |
US7173672B2 (en) * | 2001-08-10 | 2007-02-06 | Sony Corporation | System and method for transitioning between real images and virtual images |
US6950123B2 (en) * | 2002-03-22 | 2005-09-27 | Intel Corporation | Method for simultaneous visual tracking of multiple bodies in a closed structured environment |
JP4192680B2 (ja) * | 2003-05-28 | 2008-12-10 | アイシン精機株式会社 | 移動体周辺監視装置 |
EP1757087A4 (en) * | 2004-04-16 | 2009-08-19 | James A Aman | AUTOMATIC VIDEO RECORDING OF EVENTS, PURSUIT AND CONTENT PRODUCTION SYSTEM |
KR100603601B1 (ko) * | 2004-11-08 | 2006-07-24 | 한국전자통신연구원 | 다시점 콘텐츠 생성 장치 및 그 방법 |
EP2200313A1 (en) * | 2004-11-12 | 2010-06-23 | Saab Ab | Image-based movement tracking |
US9182228B2 (en) * | 2006-02-13 | 2015-11-10 | Sony Corporation | Multi-lens array system and method |
EP1862969A1 (en) | 2006-06-02 | 2007-12-05 | Eidgenössische Technische Hochschule Zürich | Method and system for generating a representation of a dynamically changing 3D scene |
US8385658B2 (en) * | 2007-07-27 | 2013-02-26 | Sportvision, Inc. | Detecting an object in an image using multiple templates |
US20090113505A1 (en) * | 2007-10-26 | 2009-04-30 | At&T Bls Intellectual Property, Inc. | Systems, methods and computer products for multi-user access for integrated video |
US8049750B2 (en) * | 2007-11-16 | 2011-11-01 | Sportvision, Inc. | Fading techniques for virtual viewpoint animations |
US8184855B2 (en) * | 2007-12-10 | 2012-05-22 | Intel Corporation | Three-level scheme for efficient ball tracking |
US9185361B2 (en) * | 2008-07-29 | 2015-11-10 | Gerald Curry | Camera-based tracking and position determination for sporting events using event information and intelligence data extracted in real-time from position information |
IL207116A (en) * | 2009-08-10 | 2014-12-31 | Stats Llc | Location tracking method and method |
US9286720B2 (en) * | 2009-08-20 | 2016-03-15 | Northrop Grumman Systems Corporation | Locative video for situation awareness |
JP5470111B2 (ja) | 2010-03-15 | 2014-04-16 | オムロン株式会社 | 監視カメラ端末 |
US9600760B2 (en) * | 2010-03-30 | 2017-03-21 | Disney Enterprises, Inc. | System and method for utilizing motion fields to predict evolution in dynamic scenes |
JP5645450B2 (ja) * | 2010-04-16 | 2014-12-24 | キヤノン株式会社 | 画像処理装置および方法 |
US20110298988A1 (en) * | 2010-06-04 | 2011-12-08 | Toshiba Alpine Automotive Technology Corporation | Moving object detection apparatus and moving object detection method |
US8532367B2 (en) * | 2010-08-17 | 2013-09-10 | Raytheon Company | System and method for 3D wireframe reconstruction from video |
JP5525495B2 (ja) * | 2011-08-30 | 2014-06-18 | 株式会社日立製作所 | 映像監視装置、映像監視方法およびプログラム |
US8457357B2 (en) * | 2011-11-09 | 2013-06-04 | Disney Enterprises, Inc. | Relative pose estimation of non-overlapping cameras using the motion of subjects in the camera fields of view |
-
2013
- 2013-06-14 JP JP2015522362A patent/JP6182607B2/ja active Active
- 2013-06-14 DK DK13886651.2T patent/DK3010229T3/en active
- 2013-06-14 WO PCT/JP2013/066418 patent/WO2014199505A1/ja active Application Filing
- 2013-06-14 EP EP13886651.2A patent/EP3010229B1/en active Active
- 2013-06-14 US US14/897,492 patent/US10491863B2/en active Active
- 2013-06-14 CN CN201380077304.1A patent/CN105284108B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
DK3010229T3 (en) | 2019-03-18 |
US10491863B2 (en) | 2019-11-26 |
CN105284108B (zh) | 2019-04-02 |
EP3010229A1 (en) | 2016-04-20 |
CN105284108A (zh) | 2016-01-27 |
EP3010229A4 (en) | 2017-01-25 |
US20160127692A1 (en) | 2016-05-05 |
JPWO2014199505A1 (ja) | 2017-02-23 |
WO2014199505A1 (ja) | 2014-12-18 |
EP3010229B1 (en) | 2019-02-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6182607B2 (ja) | 映像監視システム、監視装置 | |
JP7282851B2 (ja) | 装置、方法及びプログラム | |
US10810438B2 (en) | Setting apparatus, output method, and non-transitory computer-readable storage medium | |
CN105493154B (zh) | 用于确定增强现实环境中的平面的范围的系统和方法 | |
EP3511903A1 (en) | Three-dimensional model generating device and three-dimensional model generating method | |
RU2607774C2 (ru) | Способ управления в системе захвата изображения, устройство управления и машиночитаемый носитель данных | |
KR101181967B1 (ko) | 고유식별 정보를 이용한 3차원 실시간 거리뷰시스템 | |
CN108594999B (zh) | 用于全景图像展示系统的控制方法和装置 | |
JP2018160219A (ja) | 移動経路予測装置、及び移動経路予測方法 | |
KR20190118619A (ko) | 보행자 추적 방법 및 전자 디바이스 | |
JP2014106681A5 (ja) | ||
JP7029902B2 (ja) | 映像通話品質測定方法およびシステム | |
TW201424345A (zh) | 相機位置姿態評價裝置、相機位置姿態評價方法 | |
JP2010237804A (ja) | 画像検索システム及び画像検索方法 | |
JP2018026064A (ja) | 画像処理装置、画像処理方法、システム | |
WO2014182898A1 (en) | User interface for effective video surveillance | |
JP7043601B2 (ja) | 環境モデルを生成するための方法および装置ならびに記憶媒体 | |
JP7103229B2 (ja) | 不審度推定モデル生成装置 | |
US20160110909A1 (en) | Method and apparatus for creating texture map and method of creating database | |
KR101563736B1 (ko) | 가상자원의 위치정보 매핑 방법 및 장치 | |
KR101036107B1 (ko) | 고유식별 정보를 이용한 증강 현실 구현시스템 | |
KR20160039447A (ko) | 스테레오 카메라를 이용한 공간분석시스템 | |
KR20210055381A (ko) | 스마트 디스플레이를 통해 증강 현실 컨텐츠를 제공하는 장치, 방법 및 컴퓨터 프로그램 | |
CN111754543A (zh) | 图像处理方法、装置及系统 | |
US20210248778A1 (en) | Image processing apparatus, detection method, and non-transitory computer readable medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170124 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170209 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170718 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170724 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6182607 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |