JP5866146B2 - 全方位監視画像表示処理システム - Google Patents
全方位監視画像表示処理システム Download PDFInfo
- Publication number
- JP5866146B2 JP5866146B2 JP2011113732A JP2011113732A JP5866146B2 JP 5866146 B2 JP5866146 B2 JP 5866146B2 JP 2011113732 A JP2011113732 A JP 2011113732A JP 2011113732 A JP2011113732 A JP 2011113732A JP 5866146 B2 JP5866146 B2 JP 5866146B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- view
- luminance
- block
- monitoring
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims description 233
- 238000012544 monitoring process Methods 0.000 title claims description 168
- 230000000903 blocking effect Effects 0.000 claims description 91
- 238000006243 chemical reaction Methods 0.000 claims description 62
- 238000000034 method Methods 0.000 claims description 39
- 238000003860 storage Methods 0.000 claims description 35
- 238000012937 correction Methods 0.000 claims description 16
- 230000004075 alteration Effects 0.000 claims description 6
- 238000005520 cutting process Methods 0.000 claims description 5
- 230000006870 function Effects 0.000 description 20
- 238000003672 processing method Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 7
- 238000011112 process operation Methods 0.000 description 6
- 230000006837 decompression Effects 0.000 description 4
- 238000009825 accumulation Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 238000003702 image correction Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Landscapes
- Image Processing (AREA)
- Closed-Circuit Television Systems (AREA)
Description
本発明の実施形態に係る全方位監視画像表示処理システムは、図1に示すように、単眼カメラ(ipカメラ)11と、キャプチャ部12と、画像バッファメモリ13と、リサイズ部14と、監視用ビューの作成指示を行う入力デバイス16と、ビューパラメータ格納部(プリセット情報バッファメモリ)17と、注目領域画像作成処理部18と、切り出し画像バッファメモリ19と、ブロッキング輝度伸張処理部20と、表示ビュー作成処理部21と、表示部(表示デバイス)22とを具備して構成される。
表示部(表示デバイス)22は上記輝度伸張処理を施した監視対象画像を表示する表示出力手段を構成する。この実施形態では、表示デバイスの表示画面が640×480画素で構成され、画像バッファメモリ13に貯えられた入力画像(Pa)をリサイズ部14でリサイズした360°全周入力画像と、切り出し画像バッファメモリ19に貯えられた切り出し画像とを表示対象に、そのいずれかの画像を選択して、若しくは表示領域を区分して同時に表示出力する。この実施形態では、監視用ビューが指定されていないとき(ビュー指定情報(Ca)が入力されていない動作状態にあるとき)、画像バッファメモリ13に貯えられた(リサイズ部14でリサイズされた)360°全周の入力画像(Pa)を表示し、ユーザが監視用ビューを指定しているとき(ビュー指定情報(Ca)が入力された動作状態にあるとき)、切り出し画像バッファメモリ19に貯えられた切り出し画像を用いた指定ビューを表示する。
(ただし、αは固定値、Bmedは輝度中央値、Iaveは入力画像注目エリアの平均輝度)
上記平均輝度と上記入力画像の輝度階調範囲の中心輝度とを比較し、累乗パラメータγを用いて自動的に下式(2)又は下式(3)を切り替えて、凸曲線および凹曲線の輝度変換テーブルを作成する。
I’=I/Bmaxγ×Bmax:Iave>Bmed ・・・・式(3)凹曲線
(だたし、I’は出力輝度、Iは入力輝度、Bmedは輝度中央値、Bmaxは輝度最大値、Iaveは入力画像注目エリアの平均輝度)
この参照テーブル判定部224で作成された凸曲線および凹曲線の輝度変換テーブル232は画像変換部225に送出される(ステップS23)。
Claims (7)
- 単眼カメラで撮影した360°全周監視映像に対してユーザが指定した情報に従う監視ビューを表示可能にした全方位監視画像表示処理システムであって、
少なくとも切り出したい画像の矩形位置および領域を指定する位置指定情報を入力する入力手段と、
前記360°全周監視映像をフレーム単位にキャプチャする監視映像入力手段と、
前記監視映像入力手段がキャプチャした入力画像の前記フレーム単位の監視映像に対して、前記位置指定情報により指定された一部領域の画像を切り出す切り出し処理を実施し、その切り出した画像に対して歪曲収差を補正する補正処理を実施する領域画像処理手段と、
前記歪曲収差を補正した前記切り出し画像に対して画素単位のブロッキング輝度伸張処理を実施するブロッキング輝度伸張処理手段と、
前記ブロッキング輝度伸張処理した前記切り出し画像を前記監視ビューとして表示する表示出力手段と、
を有し、
前記ブロッキング輝度伸張処理手段は、更に
前記ブロッキング輝度伸張処理の対象となる前記入力画像について、設定された注目エリアを複数のブロックに分割し、その分割したブロック各々について、周囲のブロックの輝度値を畳み込んだ複数のブロックの輝度値をもとにブロック単位の輝度伸張パラメータを算出し、当該輝度伸張パラメータをもとに前記ブロック単位の輝度変換テーブルを作成するブロック処理手段と、
前記ブロック処理手段により作成された前記ブロック単位の輝度変換テーブルをもとに、前記分割したブロック各々の各画素について、ブロック毎に、周囲のブロックの前記輝度変換テーブルを参照してバイリニア補間を実施する補間処理手段と、
前記補間処理手段により前記バイリニア補間を施した前記各ブロックの画素をもとに前記入力画像に対する輝度伸張出力画像を作成する画像変換手段と、
を具備したことを特徴とする全方位監視画像表示処理システム。 - 単眼カメラで撮影した360°全周監視映像に対してユーザが指定した情報に従う異なる監視ビューを表示可能にした全方位監視画像表示処理システムであって、
少なくとも切り出したい画像の矩形位置、領域を指定する位置指定情報、および監視ビューを指定するビュー指定情報を入力する入力手段と、
各監視ビューの前記位置指定情報を指定ビューのプリセット情報として記憶するビューパラメータ記憶手段と、
前記360°全周監視映像をフレーム単位にキャプチャする監視映像入力手段と、
前記監視映像入力手段がキャプチャした前記フレーム単位の監視映像を入力画像として記憶する入力画像記憶手段と、
前記入力画像記憶手段に記憶した前記キャプチャしたフレーム単位の監視映像に対して、前記位置指定情報に従って前記ビューパラメータ記憶手段から読み出した前記指定ビューのプリセット情報により切り出す切り出し処理を実施し、その切り出した画像に対して歪曲収差を補正する補正処理を実施する領域画像処理手段と、
前記歪曲収差を補正した前記切り出し画像をビュー指定監視画像として記憶する切り出し画像記憶手段と、
前記切り出し画像記憶手段に記憶した前記ビュー指定監視画像に対して画素単位のブロッキング輝度伸張処理を実施するブロッキング輝度伸張処理手段と、
前記ブロッキング輝度伸張処理を施した前記ビュー指定監視画像に対して、前記ビュー指定情報により指定されたビュー形式に従う前記監視ビューの画面を作成するビュー作成処理手段と、
前記ビュー作成処理手段が作成した前記監視ビューの画面を表示する表示出力手段と、
を有し、
前記ブロッキング輝度伸張処理手段は、更に
前記ブロッキング輝度伸張処理の対象となる前記入力画像について、設定された注目エリアを複数のブロックに分割し、その分割したブロック各々について、周囲のブロックの輝度値を畳み込んだ複数のブロックの輝度値をもとにブロック単位の輝度伸張パラメータを算出し、当該輝度伸張パラメータをもとに前記ブロック単位の輝度変換テーブルを作成するブロック処理手段と、
前記ブロック処理手段により作成された前記ブロック単位の輝度変換テーブルをもとに、前記分割したブロック各々の各画素について、ブロック毎に、周囲のブロックの前記輝度変換テーブルを参照してバイリニア補間を実施する補間処理手段と、
前記補間処理手段により前記バイリニア補間を施した前記各ブロックの画素をもとに前記入力画像に対する輝度伸張出力画像を作成する画像変換手段と、
を具備したことを特徴とする全方位監視画像表示処理システム。 - 前記ビュー作成処理手段は、前記ビュー指定情報に従い、
前記位置指定情報が指定した任意地点の切り出し画像を任意のパン、チルト、ズーム指定に従い表示するPTZ用ビュー形式、
前記位置指定情報が指定した複数地点の切り出し画像を所定時間毎に順次切り替えて表示するプリセット用ビュー形式、
前記位置指定情報が指定した複数地点の切り出し画像を画面上の領域を区分して同時に表示する多地点用ビュー形式、
のいずれか一つのビュー形式に従う前記監視ビューの画面を作成する
ことを特徴とする請求項2に記載の全方位監視画像表示処理システム。 - 前記ブロッキング輝度伸張処理手段は、
前記切り出し画像記憶手段に記憶した前記ビュー指定監視画像および前記入力画像記憶手段に記憶した前記360°全周監視映像のいずれかを対象に前記ビュー指定情報の指定に従い前記画素単位のブロッキング輝度伸張処理を実施し、
前記ビュー作成処理手段は、前記ビュー指定情報に従い、
前記位置指定情報が指定した任意地点の切り出し画像を任意のパン、チルト、ズーム指定に従い表示するPTZ用ビュー形式、
前記位置指定情報が指定した複数地点の切り出し画像を所定時間毎に順次切り替えて表示するプリセット用ビュー形式、
前記位置指定情報が指定した複数地点の切り出し画像を画面上の領域を区分して同時に表示する多地点用ビュー形式、
前記360°全周監視映像を半周ずつ上下に区分して同時に表示するパノラマ用ビュー形式、
のいずれか一つのビュー形式に従う前記監視ビューの画面を作成し、
前記ビュー指定情報が指定されていないときは前記360°全周監視映像を出力することを特徴とする請求項2に記載の全方位監視画像表示処理システム。 - 前記ブロック処理手段は、
分割したブロックのうち、処理対象となる注目ブロックAについて、隣接する上下左右のブロックBと、隣接する斜め方向のブロックCとを用い、A>B>Cの重み付けにより前記畳み込みの処理を実施することを特徴とする請求項1または2に記載の全方位監視画像表示処理システム。 - 前記ブロック処理手段は、
外部から指定されたブロックサイズに従い、前記注目エリアの画像を複数のブロックに分割するブロック分割手段と、
前記ブロック分割手段が分割したブロック各々についてブロック毎の輝度総和を算出し、その算出したブロック毎の輝度総和を用いて、前記ブロック毎に、当該ブロックとその周囲のブロックを含む前記重み付けおよび畳み込み処理した全ブロックの輝度総和を算出する輝度総和算出手段と、
前記輝度総和算出手段が算出した前記輝度総和を用いて、前記ブロック毎に、当該ブロックの輝度平均を算出する輝度平均算出手段と、
前記輝度平均算出手段が算出した前記ブロックの輝度平均をもとに、前記ブロック毎に、輝度伸張パラメータを算出する輝度伸張パラメータ算出手段と、
前記輝度伸張パラメータ算出手段が算出した前記輝度伸張パラメータをもとに、前記ブロック毎に、輝度伸張用の輝度変換テーブルを作成する輝度変換テーブル作成手段と、
を具備したことを特徴とする請求項5に記載の全方位監視画像表示処理システム。 - 前記単眼カメラは、
楕円面の長辺と短辺をフレームの幅と高さに合わせた、1.3Mピクセル以上の画素数を有する楕円面の360°全周高精細監視映像を出力し、
前記ブロッキング輝度伸張処理手段は、前記楕円面の360°全周高精細監視映像の画素構成を前記表示出力手段の画素構成に合わせてリサイズした監視映像を処理対象として前記画素単位でブロッキング輝度伸張処理を実施する
ことを特徴とする請求項1または2に記載の全方位監視画像表示処理システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011113732A JP5866146B2 (ja) | 2011-05-20 | 2011-05-20 | 全方位監視画像表示処理システム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011113732A JP5866146B2 (ja) | 2011-05-20 | 2011-05-20 | 全方位監視画像表示処理システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012244480A JP2012244480A (ja) | 2012-12-10 |
JP5866146B2 true JP5866146B2 (ja) | 2016-02-17 |
Family
ID=47465691
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011113732A Active JP5866146B2 (ja) | 2011-05-20 | 2011-05-20 | 全方位監視画像表示処理システム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5866146B2 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6492041B2 (ja) * | 2016-09-07 | 2019-03-27 | 東芝テリー株式会社 | 監視画像処理装置及び監視画像処理方法 |
WO2019098052A1 (ja) * | 2017-11-20 | 2019-05-23 | 株式会社Medi Plus | 医療安全システム |
JP6355146B1 (ja) * | 2017-11-20 | 2018-07-11 | 株式会社Medi Plus | 医療安全システム |
JP6436606B1 (ja) * | 2018-07-27 | 2018-12-12 | 株式会社Medi Plus | 医療映像システム |
JP2020109926A (ja) * | 2019-01-07 | 2020-07-16 | 株式会社オリィ研究所 | ロボット制御装置、ロボット制御方法、ロボット制御プログラム及びロボット制御システム |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
FR2827680B1 (fr) * | 2001-07-20 | 2003-10-10 | Immervision Internat Pte Ltd | Procede de capture d'une image panoramique au moyen d'un capteur d'image de forme rectangulaire |
JP3922543B2 (ja) * | 2002-06-05 | 2007-05-30 | ソニー株式会社 | 撮像装置、および画像表示装置 |
JP2005269573A (ja) * | 2004-03-22 | 2005-09-29 | Yisheng Science & Technology Co Ltd | パノラマ像により2軸式監視カメラの姿勢を制御する方法及びその方法を用いたシステム |
US8254713B2 (en) * | 2005-11-11 | 2012-08-28 | Sony Corporation | Image processing apparatus, image processing method, program therefor, and recording medium in which the program is recorded |
JP2008028778A (ja) * | 2006-07-21 | 2008-02-07 | Sony Corp | 画像処理装置、画像処理方法及びそのプログラム |
JP4340303B2 (ja) * | 2007-04-10 | 2009-10-07 | 東芝テリー株式会社 | 画像処理装置および画像処理プログラム |
-
2011
- 2011-05-20 JP JP2011113732A patent/JP5866146B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2012244480A (ja) | 2012-12-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5887067B2 (ja) | 全方位監視画像処理システム | |
JP2009010730A (ja) | 画像処理方法と該画像処理方法を用いた撮像装置 | |
US20130058589A1 (en) | Method and apparatus for transforming a non-linear lens-distorted image | |
JP5866146B2 (ja) | 全方位監視画像表示処理システム | |
CN108805807B (zh) | 环景图像的拼接方法及其系统 | |
CN112367459B (zh) | 图像处理方法、电子装置及非易失性计算机可读存储介质 | |
JP4844979B2 (ja) | 画像処理方法と該画像処理方法を用いた撮像装置 | |
US9911183B2 (en) | Image processing method, image processing apparatus, image pickup apparatus, and non-transitory computer-readable storage medium | |
JP2006245793A (ja) | 撮像システム | |
JP2006345054A (ja) | 画像撮像装置 | |
US20150109408A1 (en) | System and method for capturing and rendering a landscape image or video | |
JP2010034964A (ja) | 画像合成装置、画像合成方法及び画像合成プログラム | |
KR101778744B1 (ko) | 다중 카메라 입력의 합성을 통한 실시간 모니터링 시스템 | |
KR20160094655A (ko) | 복수의 고해상도 카메라들을 이용한 파노라마 영상 감시 시스템 및 그 방법 | |
JP2012175631A (ja) | 映像監視装置 | |
JP2007096588A (ja) | 画像撮影装置および画像表示方法 | |
JP6351377B2 (ja) | 画像処理システム、撮像装置及び記録装置 | |
JP5455728B2 (ja) | 撮像装置、画像処理装置、及び画像処理方法 | |
US10171733B2 (en) | Image processing apparatus and method, and program and recording medium | |
JP2007184720A (ja) | 画像撮影装置 | |
JP2006345055A (ja) | 画像撮像装置 | |
JP6857006B2 (ja) | 撮像装置 | |
JP5486963B2 (ja) | 画像処理装置および画像処理プログラム | |
KR101011704B1 (ko) | 광각의 이미지를 생성하는 영상 처리 장치 및 방법 | |
JPH08305841A (ja) | 歪曲収差画像補正表示装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20130920 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140401 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20141216 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150106 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150226 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150609 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150728 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20151208 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160104 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5866146 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |