JP7799467B2 - 画像処理装置、画像処理方法およびプログラム - Google Patents
画像処理装置、画像処理方法およびプログラムInfo
- Publication number
- JP7799467B2 JP7799467B2 JP2021201029A JP2021201029A JP7799467B2 JP 7799467 B2 JP7799467 B2 JP 7799467B2 JP 2021201029 A JP2021201029 A JP 2021201029A JP 2021201029 A JP2021201029 A JP 2021201029A JP 7799467 B2 JP7799467 B2 JP 7799467B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- control unit
- panoramic image
- information
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Image Processing (AREA)
- Studio Devices (AREA)
Description
さらに、カメラの撮影方向を変更しながら静止画を撮影し、静止画を合成することによって、監視領域の俯瞰画像を作成するパノラマ作成機能がある。特許文献1には、複数の撮像画像からパノラマ画像を生成する方法が開示されている。
一方、スレーブデバイスの情報を何も重畳表示しない場合は、パノラマ画像上でのスレーブデバイスの存在場所さえも分からなくなってしまう。
以下、本発明の実施形態について、添付の図面に基づいて詳細に説明する。なお、以下の実施形態において示す構成は一例であり、本発明は以下の実施形態で説明する構成に限定されるものではない。また、各実施形態において、撮像手段を有するネットワークカメラを例に説明するが、本発明はネットワークカメラ以外の撮像装置にも応用可能である。例えば、放送目的の映像や映画、個人的な目的の映像を撮像する撮像手段を有する撮像装置にも応用可能である。
ネットワークカメラ100は、画像処理部102、システム制御部103、レンズ駆動部104、レンズ制御部105、パン駆動部106、チルト駆動部107、パンチルト制御部108、通信部109、及び無線通信制御部110を有している。
通信部109は、画像処理部102によって生成された画像データに基づく映像ストリームをクライアント装置200に送信する。なお、ここでの画像データは一例として動画の画像データである。また、通信部109は、クライアント装置200から送信されるコマンドを受信し、システム制御部103へ伝送する。またコマンドに対するレスポンスをシステム制御部103の制御に従ってクライアント装置200へ送信する。このようにシステム制御部103は、通信制御手段としても機能する。
レンズ制御部105は、システム制御部103から伝達された指示に基づいて、レンズ駆動部104を制御する。
レンズ駆動部104は、例えばフォーカスレンズ及びズームレンズの駆動系、その駆動源のモータなどで構成され、その動作はレンズ制御部105により制御される。
パン駆動部106は、例えばパン動作を行うメカ駆動系、その駆動源のモータ、駆動部の角度を検出する角度センサなどで構成される。
パンチルト制御部108は、システム制御部103の指示に基づいて、パン駆動部106及びチルト駆動部107を制御する。
無線通信制御部110は、無線通信規格に合わせてデータ、制御用コマンド等を送受信するもので、アンテナ111を使用してデータ、制御用コマンド等を変復調した電波を送受信する。システム制御部103は、無線通信制御部110を通して無線通信子機400とデータ、制御用コマンド等のやり取りを行い、無線通信子機400に対して情報の取得、設定等の処理を行う。
クライアント装置200は、例えばパーソナルコンピュータなどのコンピュータで構成される。クライアント装置200は、表示部201、入力部202、システム制御部203、及び通信部204を有している。
表示部201は、ネットワークカメラ100から受信した画像データに基づく映像を表示したり、カメラを制御するためのグラフィックユーザーインターフェース(以下、GUIと称する)を表示したりする。表示部201は、液晶パネルや有機ELパネル等を用いた表示デバイスで構成される。表示部201による表示は、システム制御部203による制御に従って行われる。
入力部202は、例えばキーボード、マウスなどのデバイスで構成される。クライアント装置200のユーザーは、入力部202を介してGUIに対して操作する。なお、入力部202はタッチパネルで構成されていてもよい。
このようにクライアント装置200は、ネットワーク300を介して、ネットワークカメラ100から画像データを取得することができる。また、クライアント装置200は、ネットワーク300を介して、コマンドを送信することによってネットワークカメラ100を制御することができる。
通信部204は、ネットワークカメラ100から画像データを受信する。また、通信部204は、クライアント装置200に対してコマンドを送信する。
無線通信子機400は、例えばセンサ機能を有し、センサにより取得したデータを親機として動作するネットワークカメラ100に送信する。
無線通信子機400は、バッテリで駆動し、バッテリを装着して起動した時に親機への登録処理を行い、あらかじめ定義された通信タイムアウト時間の間、親機からの通信が行われない場合に機能制限したスリープ状態になる。無線通信子機400のネットワークカメラ100への登録は、バッテリ装着による起動時以外にも、無線通信子機400にボタンを付加して、ユーザーによってボタンが押下された時に登録処理を開始するように構成することができる。図1ではスレーブデバイスとして無線通信子機400を用いて説明したがこの限りではない。有線で接続された子機であっても構わない。
ここで、図3及び図4を用いて、ネットワークカメラ100が保持する情報テーブルのデータ構成例と、ネットワークカメラ100と無線通信子機400との位置関係とについて説明する。
なお、パン、チルト504は、ネットワークカメラ100の撮影画角の中心に無線通信子機400を表示した状態におけるネットワークカメラ100のパン、チルト座標の値である。
図2において、パン駆動部106はボトムケース121とターンテーブル122とで構成され、ターンテーブル122は垂直軸を中心として水平方向に回転する。ボトムケース121の固定部とターンテーブル122の回転部とで構成されている電気回路は、スリップリングなどにより接続されているので、パン駆動部106は水平軸を含む面内にて360°の角度範囲でエンドレスに回転することができる。
まず、S701において、システム制御部103は、現在のモードがパノラマ画像を作成するモードであるか否かを判断する。システム制御部103は、現在のモードがパノラマ画像を作成するモードであると判断した場合は、処理をS702へ進める。一方、システム制御部103は、現在のモードがパノラマ画像を作成するモードでないと判断した場合は、処理をS703へ進める。
S702において、システム制御部103は、パノラマ画像の作成処理を行う。パノラマ画像の作成処理の詳細については、図8のフローチャートを用いて後述する。
S704で、システム制御部103は、パノラマ画像の4頂点のパン、チルト座標の範囲内で、ネットワークカメラ100に登録されている子機のパン、チルト位置、子機の種別を確認する。
図9は、S705で重畳するオブジェクトの一例を示す図である。アイコン1101は温度センサ、アイコン1102はドアセンサ、アイコン1103は湿度センサを示したアイコン例である。
S801において、システム制御部103は、パンチルト制御部108から現在のパンチルト座標を取得し、さらにレンズ制御部105から現在のズームを取得する。そして、システム制御部103は、これらの情報に基づいて撮影画角の4頂点のパン、チルト座標を算出する。
S802において、システム制御部103は、S801で算出したパン、チルト座標および図3の情報テーブル500に基づいて、撮影画角内に子機が存在するか否かを判断する。システム制御部103は、撮影画角内に子機が存在すると判断した場合は処理をS803へ進める。一方、システム制御部103は、撮影画角内に子機が存在しないと判断した場合は本フローの処理を終了する。
S803において、システム制御部103は、撮影画角内に存在する子機の情報を取得する。ここでは子機に状態問い合わせを行って子機の情報を取得してもよいし、あらかじめ保存している子機の情報を取得してもよい。子機の情報は、子機の機種情報や子機の有する機能に関連する情報などを含む。
ここで、図7は本処理において子機の情報が重畳された撮影画像の一例を示す図である。撮影画像900上の情報表示部902に、子機901から取得した情報が表示されている。図7において、子機901は温度計であり、情報表示部902には子機901の温度情報が表示されている。
以上のZ-Waveオーバーレイ処理が終了すると、システム制御部103は図5のフローに戻り、処理を終了する。
S1001において、システム制御部103は、パンチルト制御部108から現在のパンチルト座標を取得し、さらにレンズ制御部105から現在のズームを取得し、これらの値を保持する。
S1002において、システム制御部103は、撮影位置に合わせてパン、チルト、ズーム値を変更する。
S1003において、システム制御部103は、静止画を撮影する。
S1004において、システム制御部103は、パノラマ画像の作成領域のすべての静止画撮影が完了したか否かを判断する。システム制御部103は、パノラマ画像の作成領域のすべての静止画撮影が完了したと判断した場合は、処理をS1005へ進める。一方、システム制御部103は、パノラマ画像の作成領域のすべての静止画撮影が完了していないと判断した場合は、処理をS1002に戻す。
S1006において、システム制御部103は、S1001で保持したパン、チルト、ズーム値で復帰するようパンチルト制御部108およびレンズ制御部105に指示する。そして、パンチルト制御部108は、元のパン、チルト値でパン駆動部106およびチルト駆動部107を駆動させ、レンズ制御部105は、元のズーム値でレンズ駆動部104を駆動させる。
以上のパノラマ画像の作成処理が終了すると、システム制御部103は、処理を図5のS704へ進める。
なお、本実施形態においてはパノラマ画像の作成後にS704、S705の重畳処理を行うこととしたが、すでにS702のパノラマ画像の作成が行われている状態であれば、子機のデバイス情報が更新された際にS704、S705の処理を実行してもよい。また、クライアント装置200に対して画像データを送信する際に、S704、S705の処理を行うこととしてもよい。
第1の実施形態では、パノラマ画像を作成している間は一旦オーバーレイ機能を停止する場合についての説明をしたが、パノラマ画像の作成中に、重畳するオーバーレイの表示態様を変更することも可能である。
そこで、第2の実施形態では、図12のフローチャートを用いて、パノラマ画像の作成中に、重畳するオーバーレイの表示態様を変更する場合の処理例について説明する。なお、第1の実施形態と同様な部分については説明を省略する。本フローの処理はパン、チルト、ズームが停止する度に行ってもよいし、停止して一定時間経過したあとに行っても構わない。
S1402において、システム制御部103は、パノラマ画像の作成モード中におけるZ-Waveオーバーレイ処理を行う。本処理は、S703のZ-Waveオーバーレイ処理と比較して、表示内容及び表示方法に違いがある。
以下、このパノラマ画像の作成モード中におけるZ-Waveオーバーレイ処理の詳細について、図13のフローチャートを用いて説明する。
S1501~S1503において、システム制御部103は、第1の実施形態における図6のS801~803と同様の処理を行う。
S1505において、システム制御部103は、子機が撮影画角内において中央から右側に位置するか否かを判断する。システム制御部103は、子機が撮影画角内において中央から右側に位置すると判断した場合は、処理をS1506へ進める。一方、システム制御部103は、子機が撮影画角内において中央から左側に位置すると判断した場合は、処理をS1507へ進める。
S1507において、システム制御部103は、撮影画面の左半分に、S1504で決定した子機デバイスのアイコンを撮影画面の半分の大きさで重畳する。
図14は、S1506の処理結果の一例を示す図である。撮影画面1100の右半分にアイコン1101が重畳されている。なお、図14において、子機のデバイス情報を示すオブジェクトとしてアイコンを重畳する例を説明したが、これに限定しない。例えば子機の機種種別を示す文字列を重畳してもよい。
また、S1506およびS1507において、子機デバイスのアイコンを撮影画面の半分の大きさで重畳するとしたが、ユーザーがパノラマ画像中でアイコンを認識できる大きさに拡大してもよい。
以上のパノラマ画像の作成中におけるZ-Waveオーバーレイ処理が終了すると、システム制御部103は、処理を図12のS702へ進める。
本発明は、前述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
Claims (4)
- 撮影範囲を移動して撮影された複数の画像、および前記複数の画像のうち少なくとも1つの画像に含まれるデバイスに関する情報を取得する取得手段と、
前記複数の画像のうち、前記デバイスが含まれる画像に対して、前記取得手段により取得された前記デバイスに関する情報に対応するオブジェクトを重畳する重畳手段と、
前記重畳手段によってオブジェクトが重畳された画像を含む前記複数の画像からパノラマ画像を作成する作成手段と、
を有し、
前記作成手段によりパノラマ画像を作成する場合に、前記重畳手段は、パノラマ画像を生成しない場合よりも前記オブジェクトを拡大して重畳することを特徴とする画像処理装置。 - 前記重畳手段は、前記重畳するオブジェクトを前記デバイスが含まれる画像の半分の大きさに拡大することを特徴とする請求項1に記載の画像処理装置。
- 撮影範囲を移動して撮影された複数の画像、および前記複数の画像のうち少なくとも1つの画像に含まれるデバイスに関する情報を取得する取得工程と、
前記複数の画像のうち、前記デバイスが含まれる画像に対して、前記取得工程において取得された前記デバイスに関する情報に対応するオブジェクトを重畳する重畳工程と、
前記重畳工程においてオブジェクトが重畳された画像を含む前記複数の画像からパノラマ画像を作成する作成工程と、
を有し、
前記作成工程においてパノラマ画像を作成する場合に、前記重畳工程においては、パノラマ画像を生成しない場合よりも前記オブジェクトを拡大して重畳することを特徴とする画像処理方法。 - 撮影範囲を移動して撮影された複数の画像、および前記複数の画像のうち少なくとも1つの画像に含まれるデバイスに関する情報を取得する取得工程と、
前記複数の画像のうち、前記デバイスが含まれる画像に対して、前記取得工程において取得された前記デバイスに関する情報に対応するオブジェクトを重畳する重畳工程と、
前記重畳工程においてオブジェクトが重畳された画像を含む前記複数の画像からパノラマ画像を作成する作成工程と、
をコンピュータに実行させ、
前記作成工程においてパノラマ画像を作成する場合に、前記重畳工程においては、パノラマ画像を生成しない場合よりも前記オブジェクトを拡大して重畳することを特徴とするプログラム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2021201029A JP7799467B2 (ja) | 2021-12-10 | 2021-12-10 | 画像処理装置、画像処理方法およびプログラム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2021201029A JP7799467B2 (ja) | 2021-12-10 | 2021-12-10 | 画像処理装置、画像処理方法およびプログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2023086483A JP2023086483A (ja) | 2023-06-22 |
| JP7799467B2 true JP7799467B2 (ja) | 2026-01-15 |
Family
ID=86850363
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2021201029A Active JP7799467B2 (ja) | 2021-12-10 | 2021-12-10 | 画像処理装置、画像処理方法およびプログラム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7799467B2 (ja) |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20180321834A1 (en) | 2017-05-02 | 2018-11-08 | Kyocera Document Solutions Inc. | Display device |
| JP2021064300A (ja) | 2019-10-16 | 2021-04-22 | キヤノン株式会社 | 情報処理装置、情報処理方法及びプログラム |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH08124078A (ja) * | 1994-10-24 | 1996-05-17 | Omron Corp | センサ情報表示方法及び装置 |
-
2021
- 2021-12-10 JP JP2021201029A patent/JP7799467B2/ja active Active
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20180321834A1 (en) | 2017-05-02 | 2018-11-08 | Kyocera Document Solutions Inc. | Display device |
| JP2021064300A (ja) | 2019-10-16 | 2021-04-22 | キヤノン株式会社 | 情報処理装置、情報処理方法及びプログラム |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2023086483A (ja) | 2023-06-22 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| TWI422218B (zh) | Control devices, camera systems and programs for monitoring camera systems | |
| CN102202168B (zh) | 控制装置、相机系统和程序 | |
| CN102385747B (zh) | 用于生成全景图像的处理装置及方法 | |
| US20220124288A1 (en) | Output control apparatus, display terminal, remote control system, control method, and non-transitory computer-readable medium | |
| CN110351475B (zh) | 摄像系统、信息处理设备及其控制方法和存储介质 | |
| US11064095B2 (en) | Image displaying system, communication system, and method for image displaying | |
| JP2020005146A (ja) | 出力制御装置、表示端末、情報処理装置、移動体、遠隔制御システム、出力制御方法、プログラムおよび撮影制御装置 | |
| CN102025912B (zh) | 图像拍摄系统、设备和方法以及信息处理设备 | |
| JP2020022152A (ja) | 通信端末、プログラム、表示方法、記録媒体 | |
| JP7799467B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
| US11184547B2 (en) | Imaging device, method for controlling imaging device, and recording medium | |
| CN108696696A (zh) | 视频显示装置及视频显示装置的控制方法 | |
| EP3930305B1 (en) | Control apparatus, control method, and program | |
| JP5464290B2 (ja) | 制御装置、制御方法、及びカメラシステム | |
| JP7733472B2 (ja) | 制御装置およびその制御方法 | |
| JP2024082117A (ja) | 情報処理装置、撮像装置、撮像システム、方法、及びプログラム | |
| JP7431609B2 (ja) | 制御装置及びその制御方法及びプログラム | |
| JP2002218288A (ja) | カメラ表示システム | |
| JP2023168122A (ja) | 撮像装置、撮像装置の制御方法、及びコンピュータプログラム | |
| JP2025025738A (ja) | 撮像装置 | |
| JP2021019228A (ja) | 撮像装置、コンピュータプログラムおよび記録媒体 | |
| JP2011205574A (ja) | 制御装置、カメラシステム及びプログラム | |
| CN114079733A (zh) | 多功能摄影装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20241128 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20250820 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20250826 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20251021 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20251202 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20251226 |