JP2020057901A - Information processing apparatus, control method thereof, and program - Google Patents
Information processing apparatus, control method thereof, and program Download PDFInfo
- Publication number
- JP2020057901A JP2020057901A JP2018186376A JP2018186376A JP2020057901A JP 2020057901 A JP2020057901 A JP 2020057901A JP 2018186376 A JP2018186376 A JP 2018186376A JP 2018186376 A JP2018186376 A JP 2018186376A JP 2020057901 A JP2020057901 A JP 2020057901A
- Authority
- JP
- Japan
- Prior art keywords
- condition
- imaging
- unit
- scene
- information processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
Description
本発明は、撮像装置を制御する情報処理装置、及び撮像装置の制御方法、プログラムに関する。 The present invention relates to an information processing device that controls an imaging device, a method of controlling the imaging device, and a program.
ビデオカメラで結婚式の様子などを撮像する時に、ユーザがカメラを持って撮像すると、ユーザの撮影技術に左右されるため、撮像結果が想像した通りにならないことがある。たとえば、撮影技術が未熟なユーザが撮像した動画は、被写体をうまく追随できなかったり、ズーム率が適切でなく、極端に小さく撮影されることなどがある。または、カメラを激しく動かして撮像した場合、後から観づらい映像になったりする。 When a user captures an image of a wedding or the like with a video camera while holding the camera, the imaging result may not be as imagined because it depends on the imaging technique of the user. For example, a moving image captured by a user with an inexperienced shooting technology may not be able to follow a subject well, or may not be properly zoomed, and may be captured extremely small. Alternatively, when the camera is moved violently to capture an image, the image may be difficult to view later.
特許文献１には、無人で被写体追尾、ズーム制御を行うことにより、被写体を無理なく自然に追尾することができ、ダイナミックかつ観やすい映像を提供する自動動画撮影装置を提供する技術が開示されている。
しかし、特許文献１では、動いている被写体を追跡しやすくし、動画を見る側も観やすい映像を得るための手段が記載されているが、結婚式などの動きがほとんどない被写体を撮像する際には、新郎や新婦を追いかけるだけの動画になる可能性があり、また、新郎や新婦、来賓者の顔の表情から全身の衣装までを詳細に撮像することはできない。
However,
また、ネットワークカメラにより人や物を監視するサービスの場合でも、不審者などの追跡はできるが、詳細な顔の特徴を捉えるか、全体の服装の特徴を捉えるかのどちらかしかできず、顔の特徴と全体の服装の両方を捉えるのは難しい。 Also, in the case of a service that monitors people and things with a network camera, suspicious persons can be tracked, but it is only possible to capture the characteristics of detailed faces or the characteristics of overall clothes, It is difficult to capture both the characteristics and overall clothing.
本発明は、被写体の人物の顔の表情や特徴と、被写体の人物の全体の衣装や服装との両方とも詳細に撮像可能に撮像装置を制御させるなど、ユーザの所望の撮像を行うことを目的とする。 SUMMARY OF THE INVENTION An object of the present invention is to perform desired imaging by a user, such as controlling an imaging apparatus to be able to image in detail both the facial expression and characteristics of the face of a subject person and the entire costume and clothing of the subject person. And
本発明は、撮像部に対する撮像条件を送信する情報処理装置であって、前記撮像部により撮像される撮像画像により解析されるデータが所定の条件を満たすか判断する条件判断手段と、前記条件判断手段により所定の条件を満たすと判断された際に、撮像部の撮像条件を所定の撮像条件に変更する設定値を記憶する設定値記憶手段と、前記条件判断手段により所定の条件を満たすと判断された場合、撮像部の撮像条件を前記設定値記憶手段に記憶された設定値に変更する情報として送信する撮像条件送信手段と、前記撮像条件送信手段により撮像条件を変更した撮像部の撮像画像を表示する表示手段と、を備えることを特徴とする。 The present invention is an information processing apparatus for transmitting an imaging condition to an imaging unit, wherein the condition determination unit determines whether data analyzed by a captured image captured by the imaging unit satisfies a predetermined condition, Setting means for storing a set value for changing an imaging condition of the imaging unit to the predetermined imaging condition when the predetermined condition is determined by the means; and determining that the predetermined condition is satisfied by the condition determining means. If the imaging condition is transmitted, an imaging condition transmitting unit that transmits the imaging condition of the imaging unit to the setting value stored in the setting value storage unit, and an image captured by the imaging unit whose imaging condition is changed by the imaging condition transmitting unit And a display means for displaying
本発明によれば、被写体の人物の顔の表情や特徴と、被写体の人物の全体の衣装や服装との両方とも詳細に撮像可能に撮像装置を制御させるなど、ユーザの所望の撮像を行うことができる。 ADVANTAGE OF THE INVENTION According to the present invention, it is possible to perform a user's desired imaging, for example, by controlling an imaging device to be able to capture both the facial expression and characteristics of the face of a subject person and the entire costume and clothing of the subject person in detail. Can be.
以下、図面を参照して、本発明の実施形態を詳細に説明する。 Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
図１は、本発明の情報処理システムのシステム構成の一例を示すである。 FIG. 1 shows an example of a system configuration of the information processing system of the present invention.
図１に示す情報処理システムは、ネットワークカメラ１０１（撮像部）と、携帯端末１０２と動画像保存サーバ１０３とがネットワーク１０４を介して相互に通信可能に接続され構成されている。
The information processing system shown in FIG. 1 is configured such that a network camera 101 (imaging unit), a
ネットワークカメラ１０１は、例えば、結婚式会場や宴会場などに設置された動画像を記録するためのカメラである。ネットワークカメラは、監視カメラとして、防犯、防災、計測などの目的で設置されたものでもよく、また屋内、屋外は問わない。さらにネットワークカメラ１０１は、Ｗｅｂカメラでも良いし、ユーザが家庭などで使う民生用ビデオカメラでも良い。民生用ビデオカメラの場合は携帯端末１０２から制御可能な雲台に載せることが望ましい。
The
動画像保存サーバ１０３は、ネットワークカメラ１０１から送信された各映像を受信して保存する機能を有する。なお、動画像保存サーバ１０３は、映像解析して、その解析結果を携帯端末１０２に送信する機能を備えていても良く、動画像保存サーバ１０３の機能をネットワークカメラ１０１が有していても良い。たとえば、ネットワークカメラ１０１が前述した民生用ビデオカメラの場合は、映像を保存する筐体はネットワークカメラ１０１と同じ筐体となる。
The moving
携帯端末１０２は、ネットワークカメラ１０１から取得した映像を受信し、携帯端末１０２の表示部（ディスプレイ装置２１０）に表示する。また、ネットワークカメラ１０１のパン・チルト・ズームを制御することができる（ＰＴＺ制御）。
The
携帯端末１０２及び動画像保存サーバ１０３は、コンピュータ等の情報処理装置である。
The
図２は、図１に示す携帯端末１０２及び動画像保存サーバ１０３に適用可能な情報処理装置のハードウェア構成の一例を示すブロック図である。
FIG. 2 is a block diagram illustrating an example of a hardware configuration of an information processing apparatus applicable to the
図２に示すように、情報処理装置は、システムバス２０４を介してＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）２０１、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）２０３、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）２０２、入力コントローラ２０５、ビデオコントローラ２０６、メモリコントローラ２０７、および通信Ｉ／Ｆコントローラ２０８が接続される。
As shown in FIG. 2, the information processing apparatus includes a CPU (Central Processing Unit) 201, a ROM (Read Only Memory) 203, a RAM (Random Access Memory) 202, an
ＣＰＵ２０１は、システムバス２０４に接続される各デバイスやコントローラを統括的に制御する。
The
ＲＯＭ２０３あるいは外部メモリ２１１等の記憶装置は、ＣＰＵ２０１が実行する制御プログラムであるＢＩＯＳ（Ｂａｓｉｃ Ｉｎｐｕｔ／Ｏｕｔｐｕｔ Ｓｙｓｔｅｍ）やＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）や、本情報処理方法を実現するためのコンピュータ読み取り実行可能なプログラムおよび必要な各種データ（データテーブルを含む）を保持している。
A storage device such as the
ＲＡＭ２０２は、ＣＰＵ２０１の主メモリ、ワークエリア等として機能する。ＣＰＵ２０１は、処理の実行に際して必要なプログラム等をＲＯＭ２０３あるいは外部メモリ２１１からＲＡＭ２０２にロードし、ロードしたプログラムを実行することで各種動作を実現する。
The
入力コントローラ２０５は、入力装置２０９（入力デバイス）からの入力を制御する。入力装置２０９としては、キーボード、タッチパネル、マウス等のポインティングデバイス等が挙げられる。
The
なお、入力装置２０９がタッチパネルの場合、ユーザがタッチパネルに表示されたアイコンやカーソルやボタンに合わせて押下（指等でタッチ）することにより、各種の指示を行うことができることとする。
When the
また、タッチパネルは、マルチタッチスクリーンなどの、複数の指でタッチされた位置を検出することが可能なタッチパネルであってもよい。 Further, the touch panel may be a touch panel that can detect a position touched by a plurality of fingers, such as a multi-touch screen.
ビデオコントローラ２０６は、ディスプレイ装置２１０などの外部出力装置への表示を制御する。ディスプレイは本体と一体になったノート型パソコンのディスプレイも含まれるものとする。なお、外部出力装置はディスプレイに限ったものははく、例えばプロジェクタであってもよい。また、前述のタッチ操作により受け付け可能な装置については、入力装置２０９を提供する。
The
なおビデオコントローラ２０６は、表示制御を行うためのビデオメモリ（ＶＲＡＭ）を制御することが可能で、ビデオメモリ領域としてＲＡＭ２０２の一部を利用することもできるし、別途専用のビデオメモリを設けることも可能である。
Note that the
メモリコントローラ２０７は、外部メモリ２１１へのアクセスを制御する。外部メモリとしては、ブートプログラム、各種アプリケーション、フォントデータ、ユーザファイル、編集ファイル、および各種データ等を記憶する外部記憶装置（ハードディスク）、フレキシブルディスク（ＦＤ）などのメモリ等を利用可能である。
The
通信Ｉ／Ｆコントローラ２０８は、ネットワークを介して外部機器と接続・通信するものであり、ネットワークでの通信制御処理を実行する。例えば、ＴＣＰ／ＩＰを用いた通信、Ｗｉ−Ｆｉ、および３Ｇ回線、ＬＴＥ回線を用いた通信が可能である。
The communication I /
なお、外部メモリ２１１等の記憶装置は情報を永続的に記憶するための媒体であって、その形態をハードディスク等の記憶装置に限定するものではない。例えば、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）などの媒体であってもよい。
Note that a storage device such as the
また本実施形態における通信端末で行われる各種処理時の一時的なメモリエリアとしても利用可能である。 Further, it can be used as a temporary memory area at the time of various processes performed by the communication terminal in the present embodiment.
尚、ＣＰＵ２０１は、例えばＲＡＭ２０２内の表示情報用領域へアウトラインフォントの展開（ラスタライズ）処理を実行することにより、ディスプレイ装置２１０上での表示を可能としている。また、ＣＰＵ２０１は、ディスプレイ装置２１０上の不図示のマウスカーソル等でのユーザ指示を可能とする。
Note that the
次に、図３を用いて、図１に示したネットワークカメラ１０１のハードウェア構成の一例について説明する。
Next, an example of a hardware configuration of the
図３は、ネットワークカメラ１０１のハードウェアの構成を示す構成図である。
FIG. 3 is a configuration diagram illustrating a hardware configuration of the
ＣＰＵ３０１は、システムバス３０４に接続される各デバイスやコントローラを統括的に制御する。また、ＲＯＭ３０２あるいは外部メモリ３０５には、ＣＰＵ３０１の制御プログラムであるＢＩＯＳ（Ｂａｓｉｃ Ｉｎｐｕｔ ／ Ｏｕｔｐｕｔ Ｓｙｓｔｅｍ）やオペレーティングシステムプログラム（以下、ＯＳ）や、画像処理サーバ１０８の実行する機能を実現するために必要な後述する各種プログラム等が記憶されている。ＲＡＭ３０３は、ＣＰＵ３０１の主メモリ、ワークエリア等として機能する。
The
ＣＰＵ３０１は、処理の実行に際して必要なプログラム等をＲＡＭ３０３にロードして、プログラムを実行することで各種動作を実現するものである。
The
メモリコントローラ（ＭＣ）３０６は、ブートプログラム、各種のアプリケーション、フォントデータ、ユーザファイル、編集ファイル、各種データ、画像データ等を記憶するハードディスク（ＨＤ）やＰＣＭＣＩＡカードスロットにアダプタを介して接続されるスマートメディア（登録商標）等の外部メモリ３０５へのアクセスを制御する。
A memory controller (MC) 306 is connected to a hard disk (HD) storing a boot program, various applications, font data, user files, editing files, various data, image data, and the like via an adapter to a PCMCIA card slot via an adapter. The access to the
ネットワークカメラ１０１におけるカメラ部３０７は、画像処理部３０８と接続されており、監視対象に対して向けられたレンズを透過して得られた光をＣＣＤやＣＭＯＳ等の受光セルによって光電変換を行った後、ＲＧＢ信号や補色信号を画像処理部３０８に対して出力する。
A
ネットワークカメラ１０１における画像処理部３０８は、ＲＧＢ信号や捕色信号に基づいて、ホワイトバランス調整、ガンマ処理、シャープネス処理を行い、更に、ＹＣ信号処理を施して輝度信号Ｙとクロマ信号（以下、ＹＣ信号）を生成し、ＹＣ信号を所定の圧縮形式（例えばＪＰＥＧフォーマット、あるいはＭｏｔｉｏｎＪＰＥＧフォーマット等）で圧縮し、この圧縮されたデータは、画像データとして外部メモリ３０５へ一時保管される。
The
マイク３１０（集音部）は、音声入力コントローラ３１１と接続されており、ネットワークカメラ１０１周辺の音声を集音し、デジタル信号化して音声入力コントローラ３１１に出力する。
The microphone 310 (sound collecting unit) is connected to the
ネットワークカメラ１０１における音声入力コントローラ３１１は、デジタル化された音声情報を圧縮形式（たとえばＭＰＥＧ Ａｕｄｉｏ Ｌａｙｅｒ−３（ＭＰ３）フォーマット、あるいはＡｄｖａｎｃｅｄ Ａｕｄｉｏ Ｃｏｄｉｎｇ（ＡＡＣ、先進的音響符号化））で圧縮し、圧縮されたデータは、音声データとして外部メモリ３０５へ一時保管される。
The
通信Ｉ／Ｆコントローラ（通信Ｉ／ＦＣ）３０９は、ネットワークを介して、外部機器と接続・通信するものであり、ネットワークでの通信制御処理を実行しており、外部メモリ３０５に記憶された画像データや音声データは、通信Ｉ／Ｆコントローラ３０９によって外部機器へ送信される。
A communication I / F controller (communication I / FC) 309 connects and communicates with an external device via a network, executes communication control processing on the network, and stores images stored in the
次に、図４に示すフローチャートを用いて、ネットワークカメラ１０１、携帯端末１０２が実行する処理について説明する。
Next, the processing executed by the
図４は、本発明の実施形態における、撮像制御システム全体の処理の一例を示すフローチャートであり、図中のＳ４０１〜Ｓ４２４は各ステップを示す。各ステップの処理の内、Ｓ４０１〜Ｓ４１２は、携帯端末１０２のＣＰＵが、外部メモリ２１１に格納されたプログラムをＲＡＭ２０２にロードして実行することにより実現され、Ｓ４２１〜Ｓ４２４の各ステップの処理は、ネットワークカメラ１０１のＣＰＵ３０１が、外部メモリ３０５もしくはＲＯＭ３０２に格納されたプログラムをＲＡＭ３０３にロードして実行することにより実現される。
FIG. 4 is a flowchart illustrating an example of the processing of the entire imaging control system according to the embodiment of the present invention, and S401 to S424 in the figure indicate each step. Of the processing of each step, S401 to S412 are realized by the CPU of the
図４のフローチャートは、ユーザが携帯端末１０２からネットワークカメラ１０１を使って自動撮影を行おうとする際に開始される処理の流れである。
The flowchart of FIG. 4 is a flow of a process that is started when the user attempts to perform automatic shooting from the
まず、携帯端末１０２のＣＰＵ２０１は、ネットワークカメラ１０１から、ネットワークカメラ１０１が保持、もしくは取得する情報を受信する処理を行う（ステップＳ４０１）。
First, the
次にネットワークカメラ１０１のＣＰＵ３０１は、携帯端末１０２の要求により、ネットワークカメラ１０１が撮像している画像、ネットワークカメラ１０１が保持しているパン機能の設定値・チルト機能の設定値・ズーム機能の設定値（ＰＴＺ値）を携帯端末１０２に送信する（ステップＳ４２１）。
Next, the
次に、ステップＳ４０２において、携帯端末１０２のＣＰＵ２０１は、ユーザからネットワークカメラ１０１が撮像する範囲（画角）の変更操作を受け付ける。この処理は、撮像したい範囲（画角）を登録しておくことにより、所定の条件になると、自動撮影時にユーザが登録している画角に変更するために行う。ステップＳ４０２で、ユーザからＰＴＺ値の変更操作を受け付ける処理を、図８の携帯端末１０２のディスプレイ部２１０に表示された画面を参照して説明する。
Next, in step S402, the
図８は、本発明の実施形態における、携帯端末１０２の表示部（ディスプレイ部２１０）に表示される表示画面８００の一例である。
FIG. 8 is an example of a
図８の８００が携帯端末１０２のディスプレイ部２１０に表示された画面イメージであり、真ん中の最も広い領域８０１にネットワークカメラ１０１から受信した撮像画像を表示する。
8 is a screen image displayed on the
８０２は、ネットワークカメラ１０１のズーム設定を調整するレバー状のコントローラであり、８０２の丸部分を前後（図面では上下）させることにより、ネットワークカメラ１０１のズーム設定値を変更することができる。
８０３は、ネットワークカメラ１０１のパン設定（すなわち水平方向への左右の首振り設定）を調整するレバー状のコントローラであり、８０３の丸部分を左右に移動させることにより、ネットワークカメラ１０１のパン設定値を変更することができる。
８０４は、ネットワークカメラ１０１のチルト設定（すなわち垂直方向への上下の首振り設定）を調整するレバー状のコントローラであり、８０４の丸部分を上下に移動させることにより、ネットワークカメラ１０１のチルト設定値を変更することができる。
ステップＳ４０２において、携帯端末１０２は、８０２〜８０４の操作によりユーザからのＰＴＺ値の変更を受け付けたかどうか判断する。ＰＴＺ値の変更操作を受け付けた場合、ステップＳ４０３へと処理を遷移し、ＰＴＺ値の変更操作を受け付けていない場合は、ステップＳ４０４へと処理を遷移する。
In step S402, the
ステップＳ４０３へと処理を遷移すると、携帯端末１０２のＣＰＵ２０１は、ステップＳ４０２で変更されたＰＴＺ値（撮像条件）をネットワークカメラ１０１に送信する。
When the process proceeds to step S403, the
変更されたＰＴＺ値を受信したネットワークカメラ１０１のＣＰＵ３０１は、ステップＳ４２２において、受信したＰＴＺ値へとカメラのレンズの角度とズーム値を調整して、画角を変更する。
In step S422, the
次に、ステップＳ４２３において、ネットワークカメラ１０１のＣＰＵ３０１は、ステップＳ４２２で変更したネットワークカメラ１０１の画角の撮像画像を携帯端末１０２に送信し、携帯端末１０２の処理へと移行する。
Next, in step S423, the
ステップＳ４０２において、ＰＴＺ値の変更操作を受け付けていない場合、もしくはＰＴＺ値の変更操作を受け付け、ネットワークカメラ１０１から撮像画像を受け取った場合、ステップＳ４０４において、携帯端末１０２のＣＰＵ２０１は、ネットワークカメラ１０１から受信した撮像画像を携帯端末１０２のディスプレイ部２１０（図８の例で説明すると、８０１のエリア）に表示する。
In step S402, when the operation for changing the PTZ value is not received, or when the operation for changing the PTZ value is received and the captured image is received from the
次に、ステップＳ４０５において、携帯端末１０２のＣＰＵ２０１は、現在表示されている撮像画像の画角を登録するかユーザからの操作により判断する。図８を参照して、ユーザの操作を受け付ける例を説明する。
Next, in step S405, the
図８の８００において、ユーザは撮像されている画角が８０１に表示されている撮像範囲で良いと判断した際に、シーン登録ボタン８０５を押下する。この処理により、現在撮像範囲として表示されている画角のＰＴＺ値を携帯端末１０２に登録する処理を行う。図４のフローチャートの説明に戻る。
At 800 in FIG. 8, when the user determines that the angle of view being captured is within the imaging range displayed at 801, the user presses the
図４のフローチャートのステップＳ４０５において、ユーザから現在のシーン（画角）を登録する処理（シーン登録ボタン８０５の押下）を受け付けると、ステップＳ４０６へと処理を遷移する。一方、シーンを登録する処理を受け付けなかった場合、ステップＳ４０７へと処理を遷移する。 In step S405 of the flowchart of FIG. 4, when the process of registering the current scene (angle of view) from the user (pressing of the scene registration button 805) is received, the process proceeds to step S406. On the other hand, if the process of registering a scene has not been received, the process proceeds to step S407.
ステップＳ４０６へと処理を遷移すると、携帯端末１０２のＣＰＵ２０１は、携帯端末１０２が保持しているネットワークカメラ１０１のＰＴＺ値をシーン名とともに登録する処理（設定値記憶処理）を行う。詳細な処理を、図５を参照して説明する。
When the process proceeds to step S406, the
図５は、本発明の実施形態における、携帯端末１０２の撮影シーンを登録する処理の一例を示すフローチャートであり、図中のＳ５０１〜Ｓ５０８は各ステップを示す。各ステップの処理は、携帯端末１０２の外部メモリ２１１に格納されたアプリケーションプログラムを、それぞれのシステムのＣＰＵ２０１がＲＡＭ２０２上にロードして実行することにより実現される。
FIG. 5 is a flowchart illustrating an example of a process of registering a shooting scene of the
図５のフローチャートは、図４のフローチャートのステップＳ４０６に遷移した際に開始される処理の流れであり、図中のＳ５０１〜Ｓ５０８は各ステップを示す。各ステップのＳ５０１〜Ｓ５０８の処理は、携帯端末１０２のＣＰＵが、外部メモリ２１１に格納されたプログラムをＲＡＭ２０２にロードして実行することにより実現される。
The flowchart of FIG. 5 is a flow of a process that is started when the process proceeds to step S <b> 406 of the flowchart of FIG. 4. The processing of S501 to S508 in each step is realized by the CPU of the
図５のフローチャートは、図４のステップＳ４０６へと処理が遷移した際に開始される処理の流れである。 The flowchart of FIG. 5 is a flow of a process that is started when the process transitions to step S406 of FIG.
まず、ステップＳ５０１において、携帯端末１０２のＣＰＵ２０１は、携帯端末１０２が保持しているネットワークカメラ１０１のＰＴＺ値を記憶する。この際、携帯端末１０２はネットワークカメラ１０１から情報を取得し、そのＰＴＺ値を記憶しても良い。
First, in step S501, the
次に、ステップＳ５０２において、携帯端末１０２のＣＰＵ２０１は、携帯端末１０２の表示部２１０にシーン登録に関する画面を表示させる。図９を参照して、携帯端末１０２の表示部２１０に表示された画面イメージを説明する、
図９は、本発明の実施形態における、携帯端末１０２の表示部（ディスプレイ装置２１０）に表示される表示画面９００の一例である。
Next, in step S502, the
FIG. 9 is an example of a
図９の９００が携帯端末１０２のディスプレイ部２１０に表示されたシーン登録画面のイメージであり、シーン名入力欄９０１には、登録したい画面のシーンの名前を入力装置２０９（キーボードやタッチパネルなど）により受け付ける。
9 is an image of a scene registration screen displayed on the
９０２には既に登録されている登録シーン一覧が表示されている。この登録シーン一覧からユーザがシーンの一つを選び、削除ボタン９０３を押下すると、選ばれたシーンを削除することができる。図５のフローチャートの説明に戻る。
A list of registered
図５のフローチャートのステップＳ５０２において、たとえば図９のような画面を表示すると、次のステップＳ５０３において、携帯端末１０２のＣＰＵ２０１は、登録シーンリスト９０２から、一つもしくは複数の登録シーンの選択を受け付ける。
When a screen as shown in FIG. 9 is displayed in step S502 of the flowchart in FIG. 5, for example, in the next step S503, the
次に、ステップＳ５０４において、携帯端末１０２のＣＰＵ２０１は、削除ボタン（図９の９０３）が押下されたか判断する。削除ボタン９０３が押下された場合、ステップＳ５０５へと処理を遷移し、削除ボタン９０３が押下されない場合はステップＳ５０６へと処理を遷移する。
Next, in step S504, the
ステップＳ５０５へと処理が遷移すると、携帯端末１０２のＣＰＵ２０１は、図９の登録シーン一覧９０２内で選択されている登録シーンを携帯端末１０２の外部メモリ２１１から削除（登録シーン一覧の名前でＰＴＺ値を登録しているデータを削除）する処理を行う。図９と図１２を参照して登録シーンの削除の処理を説明する。
When the process shifts to step S505, the
図１２は、本発明の実施形態における、携帯端末１０２の外部メモリ等の記憶手段に記憶されている登録シーンの一覧データの一例を示す図であり、これらの設定値をネットワークカメラ１０１に送信することにより、ネットワークカメラ１０１の撮影範囲（画角）を制御する。
FIG. 12 is a diagram illustrating an example of list data of registered scenes stored in a storage unit such as an external memory of the
図１２のデータテーブルは、図９のシーン登録画面のイメージに対応するデータを登録した図の例であり、１番目のデータが「全体シーン」として登録されている。図１２の例では、「全体シーン」には「パン設定値」（左右の首振り角度）が０度、「チルト設定値」（上下の首振り角度）が０度、「ズーム倍率」が１倍（ワイド端）というデータが登録されている。また、２番目のデータである「メインシーン」には、たとえば「パン設定値」が右側に１０度、「チルト設定値」が下方向に５度、「ズーム倍率」が４．５倍というデータが登録されている例である。 The data table in FIG. 12 is an example of a diagram in which data corresponding to the image of the scene registration screen in FIG. 9 is registered, and the first data is registered as “whole scene”. In the example of FIG. 12, in the “whole scene”, the “pan setting value” (left and right swing angles) is 0 degrees, the “tilt set value” (up and down swing angles) is 0 degrees, and the “zoom magnification” is 1 Double (wide end) data is registered. The second data “main scene” includes, for example, data in which “pan setting value” is 10 degrees to the right, “tilt setting value” is 5 degrees downward, and “zoom magnification” is 4.5 times. Is an example in which is registered.
これら図１２のようなデータテーブルを記憶する外部メモリ２１１のデータを図９の９００のような画面イメージで登録シーン名で表示し、ステップＳ５０３において、９０２内の登録シーンを選択する。その後、ステップＳ５０４において、削除ボタン９０３が押下されると、ステップＳ５０３で選択された登録シーンのデータをステップＳ５０５において削除する。図５のフローチャートの説明に戻る。
The data in the
次にステップＳ５０６へと処理を移行すると、携帯端末１０２のＣＰＵ２０１は、たとえば、図９のシーン名欄９０１へ名前の入力を受け付ける。
Next, when the process proceeds to step S506, the
次にステップＳ５０７において、携帯端末１０２のＣＰＵ２０１は、登録ボタン（図９の９０４）が押下されたか判断する。登録ボタン９０４が押下された場合、ステップＳ５０８へと処理を遷移し、登録ボタン９０４が押下されない場合はステップＳ５０２、もしくはステップＳ５０３へと処理を遷移する。
Next, in step S507, the
ステップＳ５０８へと処理を遷移すると、携帯端末１０２のＣＰＵ２０１は、ステップＳ５０８で入力されたシーン名でステップＳ５０１において記憶したＰＴＺ値を、たとえば図１２のデータテーブルのような形式で保存する処理を実行する。
When the process proceeds to step S508, the
以上、図５の処理を繰り返すことにより、たとえば図１２のようなデータテーブルを形成するデータを作成する。図４のフローチャートの説明に戻る。 As described above, data forming a data table as shown in FIG. 12, for example, is created by repeating the processing of FIG. Returning to the description of the flowchart of FIG.
図４のステップＳ４０６の処理が終わると、次にステップＳ４０７へと処理を遷移する。 When the process of step S406 in FIG. 4 ends, the process proceeds to step S407.
ステップＳ４０７において、携帯端末１０２のＣＰＵ２０１は、シーン（撮像画像の画角）を変更する条件の入力を受け付けるかユーザからの操作により判断する。図８を参照して、ユーザの操作を受け付ける例を説明する。
In step S <b> 407, the
図８の８００において、ユーザがシーン（撮像画像の画角）を変更する条件を入力する場合に、ユーザはシーン変更条件ボタン８０６を押下する。この処理により、ユーザは撮像シーンを変更するタイミングを設定することができる。図４のフローチャートの説明に戻る。
At 800 in FIG. 8, when the user inputs a condition for changing a scene (angle of view of a captured image), the user presses a scene
ステップＳ４０７において、ユーザからシーン（撮像画像の画角）を変更する条件を入力するボタン（シーン変更条件ボタン８０６の押下）を受け付けると、ステップＳ４０８へと処理を遷移する。一方、シーン（撮像画像の画角）を変更する条件を入力するボタンが押下されていない場合、ステップＳ４０９へと処理を遷移する。 In step S407, when a button (pressing of the scene change condition button 806) for inputting a condition for changing a scene (angle of view of a captured image) is received from the user, the process proceeds to step S408. On the other hand, if the button for inputting the condition for changing the scene (the angle of view of the captured image) has not been pressed, the process proceeds to step S409.
ステップＳ４０８へと処理を遷移すると、携帯端末１０２のＣＰＵ２０１は、シーンを変更する条件を設定する処理を行う、詳細な処理を、図６を参照して説明する。
When the process proceeds to step S408, the
図６は、本発明の実施形態における、携帯端末１０２の撮影シーンを変更する条件を登録する処理の一例を示すフローチャートであり、図中のＳ６０１〜Ｓ６０７は各ステップを示す。各ステップの処理は、携帯端末１０２の外部メモリ２１１に格納されたアプリケーションプログラムを、それぞれのシステムのＣＰＵ２０１がＲＡＭ２０２上にロードして実行することにより実現される。
FIG. 6 is a flowchart illustrating an example of a process of registering a condition for changing a shooting scene of the
図６のフローチャートは、図４のフローチャートのステップＳ４０８に遷移した際に開始される処理の流れである。 The flowchart of FIG. 6 is a flow of a process that is started when the process proceeds to step S408 of the flowchart of FIG.
まず、ステップＳ６０１において、携帯端末１０２のＣＰＵ２０１は、表示部２１０にシーン変更条件の画面を表示する。図１０を参照して、携帯端末１０２の表示部２１０に表示された画面イメージを説明する、
図１０は、本発明の実施形態における、携帯端末１０２の表示部（ディスプレイ装置２１０）に表示される表示画面１０００の一例である。
First, in step S <b> 601, the
FIG. 10 is an example of a
図１０の１０００が携帯端末１０２のディスプレイ部２１０に表示されたシーン変更条件設定画面のイメージである。シーン変更条件一覧１００２には、シーン（撮像範囲）を変更する条件と変更後の撮像範囲（画角）が定義（記憶）されている（条件記憶部）。
10 is an image of a scene change condition setting screen displayed on the
１００１のシーン変更条件入力欄（入力受付部）には、シーンを変更する条件と変更後の撮像範囲の入力をプルダウンメニュからシーン変更条件を登録するための項目をそれぞれユーザから受け付ける。シーンを変更する際の条件を四角で囲われた入力のシーン変更条件入力欄１００１のユーザの入力後、登録ボタン１００４が押下されると、図１０の場合は、「『顔検出』の『人数』が『３０』秒間『変わらない』場合は『ズーム』を『ゆっくり』の速さで『メインシーンの倍率』に変更する」という条件が登録される。また、１００２のシーン変更条件一覧から一つの条件を選択後、削除ボタン１００３が押下されると、１００２の中で選択されたシーン変更条件が削除される。図６のフローチャートの説明に戻る。
In a scene change condition input field (input receiving unit) 1001, an item for registering a scene change condition and an item for registering a scene change condition from a pull-down menu for input of a changed imaging range are received from the user. When the user presses the
ステップＳ６０１においてシーン変更条件の画面が表示されると、次のステップＳ６０２において、携帯端末１０２のＣＰＵ２０１は，ユーザが削除したいシーン変更条件の選択を受け付ける。シーン変更条件の選択とは、たとえば図１０の１００２の一覧から選択されることである。削除したいシーン変更条件がない場合は、選択を受け付けなくても良い。
When the scene change condition screen is displayed in step S601, in the next step S602, the
次のステップＳ６０３において、携帯端末１０２のＣＰＵ２０１は，たとえば、図１０の削除ボタン１００３の押下を受け付けたか判断する。削除ボタン１００３の押下を受け付けると、ステップＳ６０４へと処理を遷移し、削除ボタン１００３の押下を受け付けない場合は、ステップＳ６０５の処理へと遷移する。
In the next step S603, the
削除ボタン１００３の押下を受け付け、ステップＳ６０４へと処理を遷移すると、携帯端末１０２のＣＰＵ２０１は，シーン変更条件一覧からステップＳ６０２で選択されたシーン変更条件を削除する処理を行う。削除されたシーン変更条件は一覧から削除され、記憶している記憶部からも削除される。
Upon receiving the press of the
次のステップＳ６０５において、携帯端末１０２のＣＰＵ２０１は，ユーザからのシーン変更条件の入力を受け付ける。ユーザからのシーン変更条件の入力例は上述した図１０の１００１の例である。
In the next step S605, the
次のステップＳ６０６において、携帯端末１０２のＣＰＵ２０１は，たとえば、図１０の登録ボタン１００４の押下を受け付けたか判断する。登録ボタン１００４の押下を受け付けると、ステップＳ６０７へと処理を遷移し、登録ボタン１００４の押下を受け付けない場合は、ステップＳ６０２へと処理を戻す。
In the next step S606,
ステップＳ６０７へと処理が遷移すると、携帯端末１０２のＣＰＵ２０１は，たとえば図１０の１００１で設定されたシーン変更条件をシーン変更条件テーブル１１００に登録する。１００１で登録されたシーン変更条件テーブルの例が１１００の１行目のレコードである。
When the process transitions to step S607, the
以上の処理のように、シーン（画角）を変えるタイミングなどをユーザが予め設定することができ、ユーザの希望する撮影動画や静止画を撮像することができる。図６のフローチャートの説明を終え、図４のフローチャートの説明に戻る。 As in the above-described processing, the user can preset the timing of changing the scene (angle of view), and can capture a desired moving image or still image desired by the user. The description of the flowchart in FIG. 6 is completed, and the description returns to the flowchart in FIG.
図４のステップＳ４０８のシーン変更条件設定処理が終わると、次にステップＳ４０９へと処理を遷移する。ステップＳ４０９において、携帯端末１０２のＣＰＵ２０１は、ユーザのシーン登録処理ならびにシーン変更条件設定処理が終わったかどうかを受け付ける。具体的には図９や図１０が表示されている段階で図示しない登録終了ボタンが押下されたかどうかで判断する。シーン登録処理ならびにシーン変更条件設定処理が終了する場合は、ステップＳ４１０へと処理を遷移し、終了しない場合は、ステップＳ４０２へと処理を戻す。
When the scene change condition setting process of step S408 in FIG. 4 ends, the process proceeds to step S409. In step S409, the
ステップＳ４１０へと処理を進めると、携帯端末１０２のディスプレイ部２１０には、図８のような画面が表示される。携帯端末１０２のＣＰＵ２０１は，録画（開始）ボタンが押下されたかによって処理を分ける。録画ボタンの例として、図８の８００の例では、８０８であり、この録画ボタン８０８が押下されると、ステップＳ４１１へと処理を遷移する。一方、録画ボタンが押下されていない場合は、ステップＳ４１２へと処理を遷移する。
When the process proceeds to step S410, a screen as shown in FIG. 8 is displayed on the
ステップＳ４１１へと処理を遷移すると、携帯端末１０２のＣＰＵ２０１は，自動撮像を開始する。ステップＳ４１１の処理の詳細を図７を参照して説明する。
When the process proceeds to step S411, the
図７は、本発明の実施形態における、撮像制御システムの自動撮像処理の一例を示すフローチャートであり、図中のＳ７０１〜Ｓ７２６は各ステップを示す。各ステップの処理の内、Ｓ７０１〜Ｓ７０９は、携帯端末１０２のＣＰＵが、外部メモリ２１１に格納されたプログラムをＲＡＭ２０２にロードして実行することにより実現され、Ｓ７２１〜Ｓ７２６の各ステップの処理は、ネットワークカメラ１０１のＣＰＵ３０１が、外部メモリ３０５もしくはＲＯＭ３０２に格納されたプログラムをＲＡＭ３０３にロードして実行することにより実現される。
FIG. 7 is a flowchart illustrating an example of the automatic imaging process of the imaging control system according to the embodiment of the present invention. In the drawing, S701 to S726 indicate each step. Of the processing of each step, S701 to S709 are realized by the CPU of the
図７のフローチャートは、図４のフローチャートのステップＳ４１１へと処理が遷移すると開始される処理の流れである。 The flowchart of FIG. 7 is a flow of a process that is started when the process transitions to step S411 of the flowchart of FIG.
まず、ステップＳ７０１において、携帯端末１０２のＣＰＵ２０１は，ネットワークカメラ１０１に録画を開始する命令を送信する（録画指示処理）。
First, in step S701, the
ステップＳ７２１において、命令を受信したネットワークカメラ１０１のＣＰＵ３０１は、録画を開始する。
In step S721, the
次に、ステップＳ７２２において、ネットワークカメラ１０１のＣＰＵ３０１は、録画している動画の画像情報と、ＰＴＺ値とを携帯端末１０２に送信する。ネットワークカメラ１０１は次のＰＴＺ値を変更する依頼（ステップＳ７２３）を受信しない限り、録画停止命令（ステップＳ７２５）を受信するまで、ステップＳ７２２へと処理を戻し、所定の画角で撮像を続ける。
Next, in step S722, the
ステップＳ７０２において、携帯端末１０２のＣＰＵ２０１は，録画している画像とＰＴＺ値をネットワークカメラ１０１から受信すると、次のステップＳ７０３において、撮像されている画像の解析を行う。具体的にはＨａａｒ―Ｌｉｋｅ特徴量検出により顔検出を行うが、他の検出方法でもよく、解析方法や解析するものは他のものでも良い。なお、顔検出は本実施例では携帯端末１０２で行っているが、ネットワークカメラ１０１で行ってもよく、ネットワークカメラ１０１のＣＰＵ３０１で画像解析を行う場合は、ネットワークカメラ１０１は、撮像されている顔の数を携帯端末１０２に送信する。
In step S702, when the
次に、ステップＳ７０４において、携帯端末１０２のＣＰＵ２０１は，ステップＳ７０３で解析された顔検出の数などを元に図１１のシーン変更条件に合致したかの判断を行う。シーン変更条件に合致している場合は、ステップＳ７０５へと遷移し、シーン変更条件になった時間を計測するためのタイマーを起動する。一方シーン変更条件に合致しない場合はステップＳ７０８へと処理を遷移し、停止ボタンが押下されるまでステップＳ７０２へと処理を戻す。
Next, in step S704, the
ステップＳ７０５において、タイマーが起動されると、次のステップＳ７０６において、携帯端末１０２のＣＰＵ２０１は、各シーン変更条件ごとの設定時間だけタイマーが経過したか判断する。タイマーがシーン変更条件で設定されている時間だけ経過している場合は、ステップＳ７０７へと処理を遷移する。一方、シーン変更条件で設定されている時間だけ経過していない場合は、ステップＳ７０８へと処理を遷移して、停止ボタンが押下されるまでステップＳ７０２へと処理を戻す。
When the timer is started in step S705, in the next step S706, the
ステップＳ７０７へと処理を遷移すると、携帯端末１０２のＣＰＵ２０１は、各シーン変更条件に設定されているシーン（画角）にネットワークカメラ１０１を合わせるため、ネットワークカメラ１０１に設定されているＰＴＺ値を送信する（撮像条件送信処理）。その際にステップＳ７０５で起動したタイマーはリセットする。
When the process proceeds to step S707, the
ステップＳ７０７においてネットワークカメラ１０１に送信されたＰＴＺ値をネットワークカメラ１０１が受信する（ステップＳ７２３）と、ネットワークカメラ１０１のＣＰＵ３０１は、ステップＳ７２４へと処理を遷移する。携帯端末１０２からＰＴＺ値を受信しない場合は、ステップＳ７２５へと処理を遷移し、録画停止命令を受信するまで、ステップＳ７２２へと処理を遷移し、画角を変えずに撮像を続ける。
When the
ステップＳ７２４に処理を遷移すると、ネットワークカメラ１０１のＣＰＵ３０１は、ネットワークカメラの画角をステップＳ７０７で送信されたＰＴＺ値に変更し、撮像を続ける。携帯端末１０２の処理の説明に戻る。
When the process proceeds to step S724, the
携帯端末１０２において、ステップＳ７０７のＰＴＺ値の送信処理が終わると、次にステップＳ７０８の処理へと遷移する。
After the transmission process of the PTZ value in step S707 is completed in the
ステップＳ７０８において、携帯端末１０２のＣＰＵ２０１は、ユーザにより停止ボタンが押下されたかを判断する。停止ボタンが押下されるとステップＳ７０９へと処理を遷移し、停止ボタンが押されていない場合は、ステップＳ７０２へと処理を戻し、撮像を続ける。停止ボタンの例として図８を参照して説明すると、表示部２１０内の８００内に表示されている停止ボタン８０９がその例であり、停止ボタン８０９が押下されていると、ステップＳ７０９へと処理を遷移する。
In step S708, the
ステップＳ７０９へと処理を遷移すると、携帯端末１０２のＣＰＵ２０１は、ネットワークカメラ１０１に録画を停止する命令を送信して、図７の携帯端末１０２の処理を終える。
When the process proceeds to step S709, the
ネットワークカメラ１０１は、ステップＳ７２５において、ステップＳ７０９から送信された録画停止命令を受信する。ステップＳ７２５において、録画停止命令を受信すると、ネットワークカメラ１０１のＣＰＵ３０１は、ステップＳ７２６へと処理を遷移し、ネットワークカメラ１０１の録画を停止する。
In step S725, the
以上、図７の処理により、撮像映像がシーン変更条件を満たすと所定のシーン（画角）に変更して撮像を続けることができ、定点撮影にも関わらず動的な撮像が可能となる。図４のフローチャートの説明に戻る。 As described above, according to the processing in FIG. 7, when the captured video satisfies the scene change condition, the image can be changed to a predetermined scene (angle of view) and imaging can be continued, and dynamic imaging can be performed despite fixed-point imaging. Returning to the description of the flowchart of FIG.
図４のステップＳ４１１において、携帯端末１０２は、ネットワークカメラ１０１に撮像画像の録画、保存（ステップＳ４２４、すなわち、ステップＳ７２１〜ステップＳ７２６の処理）を命令し、録画停止ボタンによりステップＳ４１２へと処理を遷移する。
In step S411 of FIG. 4, the
次にステップＳ４１２において、携帯端末１０２のＣＰＵ２０１は、撮像を終了するかどうかの判断をユーザから受け付ける。撮像を終了しない場合は、ステップＳ４０１へと処理を戻す。撮像を終了する例としては、図８の状況で図示しない撮像アプリケーションの終了ボタンが押下されたかどうかで判断する。
Next, in step S412, the
次に、図１３を参照して、実際の撮像場面で想定される撮像画像のシーン変更の例を説明する。 Next, an example of a scene change of a captured image assumed in an actual imaging scene will be described with reference to FIG.
図１３は、本発明の実施形態における、携帯端末１０２の表示部（ディスプレイ装置２１０）に表示される表示画面の遷移の例を示す模式図であり、各シーンは図１１、図１２のそれぞれのシーン名やシーン変更後の撮像されている画面イメージを示す。。
FIG. 13 is a schematic diagram showing an example of transition of a display screen displayed on the display unit (display device 210) of the
１３０１は、最初に設定されている「全体シーン」の例であり、ＰＴＺ値としては、図１２の一行目のように、「パン設定値」が０度、「チルト設定値」が０度、「ズーム倍率」が１倍（ワイド端）である。「全体シーン」に移行するシーン変更条件は、図１１の４行目と５行目の場合である。すなわち、４行目は、「『顔検出』の『人数』が『１０秒間』の間『０』の場合、『シーン』を『早く』の速さで『全体シーン』に変更する」、また５行目は「『メインシーン』の『人数』が『５分間』の間『変わらない』場合、『シーン』を『標準』の速さで『全体シーン』に変更する」処理を行う。 Reference numeral 1301 denotes an example of the “whole scene” set first. As the PTZ values, as shown in the first row of FIG. 12, the “pan setting value” is 0 degrees, the “tilt setting value” is 0 degrees, The “zoom magnification” is 1 (wide end). The scene change condition for shifting to the “whole scene” is the case of the fourth and fifth rows in FIG. That is, the fourth line indicates that “if“ number ”of“ face detection ”is“ 0 ”for“ 10 seconds ”,“ scene ”is changed to“ whole scene ”at“ fast ”speed, and The fifth line carries out a process of "if the" number of people "in the" main scene "does not change for" 5 minutes ", change the" scene "to" whole scene "at" standard "speed".
１３０２は、「メインシーン」の例であり、ＰＴＺ値としては、図１２の二行目のように、「パン設定値」が右側に１０度、「チルト設定値」が下方向に５度、「ズーム倍率」が４．５倍である。以降１３０２から１３１１の画像イメージは番号順に撮像シーン（画角）が変わる様子を説明した例である。シーン変更条件は図１１の１１００に対応している。 Reference numeral 1302 denotes an example of the “main scene”. As the PTZ values, as shown in the second line of FIG. 12, the “pan setting value” is 10 degrees to the right, the “tilt setting value” is 5 degrees downward, The “zoom magnification” is 4.5 times. Hereinafter, the images 1302 to 1311 are examples in which the imaging scene (angle of view) changes in numerical order. The scene change condition corresponds to 1100 in FIG.
「メインシーン」１３０２を撮像している状況で、１３０３の画面イメージのように人数が増えた後の例を１３０４の画面イメージを参照して説明する。顔検出の人数が増えた場合は、シーン変更条件テーブル１１００の３行目によると「『顔検出』の『人数』が『５秒間』の間『増えた』場合、『ズーム倍率』を『標準』の速さで『顔検出された領域が画面の最大に収まるよう』に変更する」処理をネットワークカメラ１０１に行わせる。３行目の処理によりズーム倍率を変更した後の例が１３０４の画面イメージである。１３０４は１３０２の画面イメージの２人から３人に顔検出の人数が増え（１３０３の画面イメージ）、その状況が５秒間以上続いたため、３人の顔検出領域が含まれる最大画角までズームアップした例である。 An example in which the number of persons has increased as in the screen image 1303 in the situation where the “main scene” 1302 is being imaged will be described with reference to the screen image 1304. According to the third line of the scene change condition table 1100, when the number of people for face detection increases, the "zoom magnification" is set to "standard" when "the number of people" of "face detection" increases for "5 seconds". At the speed of "change so that the area where the face is detected fits on the maximum of the screen" ". An example after changing the zoom magnification by the processing of the third line is a screen image 1304. In step 1304, the number of face detections increased from two to three in the 1302 screen image (1303 screen image), and the situation continued for 5 seconds or more, so that the image was zoomed up to the maximum angle of view including the three face detection areas. This is an example.
１３０４の画面イメージを撮像している状況で、１３０５の画面イメージのように人数が減った後の例を１３０６の画面イメージを参照して説明する。顔検出の人数が減った場合は、シーン変更条件テーブル１１００の２行目によると「『顔検出』の『人数』が『５秒間』の間『減った』場合、『ズーム倍率』を『標準』の速さで『顔検出された領域が画面の最大に収まるよう』に変更する」処理をネットワークカメラ１０１に行わせる。。２行目の処理によりズーム倍率を変更した後の例が１３０６の画面イメージである。１３０６は１３０４の画面イメージの３人から２人に顔検出の人数が減り（１３０５の画面イメージ）、その状況が５秒間以上続いたため、２人の顔検出領域が含まれる最大画角までズームアップした例である。 An example after the number of people is reduced as in the case of the screen image of 1305 in a situation where the screen image of 1304 is being captured will be described with reference to the screen image of 1306. According to the second line of the scene change condition table 1100, when the number of face detections decreases, the "zoom magnification" is set to "standard" At the speed of "change so that the area where the face is detected fits on the maximum of the screen" ". . An example after changing the zoom magnification by the processing of the second line is a screen image 1306. In step 1306, the number of face detections is reduced from three in the screen image of 1304 to two people (screen image in 1305), and since the situation lasts for 5 seconds or more, the image is zoomed up to the maximum angle of view including the face detection area of the two people. This is an example.
１３０６の画面イメージを撮像している状況で、１３０６の画面イメージのようなまま人数が変わらない場合の後の例を１３０７の画面イメージを参照して説明する。顔検出の人数が変わらない場合は、シーン変更条件テーブル１１００の１行目によると「『顔検出』の『人数』が『３０秒間』の間『変わらない』場合、『ズーム倍率』を『ゆっくり』の速さで『メインシーンの倍率』に変更する」処理をネットワークカメラ１０１に行わせる。１行目の処理によりズーム倍率を変更した後の例が１３０７の画面イメージである。１３０７は１３０６の画面イメージの顔検出の人数が変わらず、その状況が３０秒間以上続いたため、ズーム倍率をメインシーンの倍率である４．５倍に設定した（元のメインシーンの倍率に戻した）例である。 An example in which the number of people does not change while the screen image of 1306 is being captured as in the screen image of 1306 will be described with reference to the screen image of 1307. If the number of face detections does not change, according to the first line of the scene change condition table 1100, if the “number of people in“ face detection ”does not change for“ 30 seconds ”, set the“ zoom magnification ”to“ slow ”. At the speed of "change to the magnification of the main scene" ". An example after the zoom magnification is changed by the processing of the first line is a screen image 1307. In step 1307, since the number of face detections in the screen image in step 1306 did not change and the situation continued for 30 seconds or more, the zoom magnification was set to 4.5, which is the main scene magnification (returned to the original main scene magnification). This is an example).
１３０７の画面イメージを撮像している状況で、１３０８のように画面から顔検出できる人数がいなくなった場合の後の例を１３０９の画面イメージを参照して説明する。撮像範囲内に顔検出できる人数がいなくなった場合は、シーン変更条件テーブル１１００の４行目によると「『顔検出』の『人数』が『１０秒間』の間『０』の場合、『シーン』を『早く』の速さで『全体シーン』に変更する」処理をネットワークカメラ１０１に行わせる。４行目の処理によりシーン名が「全体シーン」として図１２の１行目で定義されたＰＴＺ値に変更する。撮像範囲を変更した後の例が１３０９の画面イメージである。１３０９は１３０８の画面イメージのように顔検出できる人数が０人になり、その状況が１０秒間以上続いたため、「全体シーン」のＰＴＺ値へと変更した例である。
In the situation where the screen image of 1307 is being imaged, an example after the case where the number of people who can detect a face from the screen as in 1308 is gone will be described with reference to the screen image of 1309. According to the fourth line of the scene change condition table 1100, when the number of people who can detect a face is no longer within the imaging range, according to the fourth line of the scene change condition table 1100, if the “number of people” of “face detection” is “0” for “10 seconds”, Is changed to “whole scene” at a “fast” speed ”by the
１３０９の画面イメージを撮像している状況（「全体シーン」を撮像している状況）で、１３０９の画面イメージ内の人数が変わらない場合の後の例を１３１０の画面イメージを参照して説明する。「全体シーン」のＰＴＺ値で撮像している場合、シーン変更条件テーブル１１００の６行目によると「『メイン（シーン）』の『人数』が『１５秒間』の間『変わらない』場合、『シーン』を『標準』の速さで『撮影回数が少ないシーン』に変更する」処理をネットワークカメラ１０１に行わせる。６行目の処理により撮影回数が少ないシーンとして、たとえば「サブシーン（Ａ）」が選択された場合の例が１３１０の画面イメージである。１３１０はたとえば、１３０９のように「全体シーン」が１５秒間以上続いたため、撮影回数（図１２の登録シーンの一覧データ１２００の撮影回数欄）が少ない４行目（撮影回数が０回）の撮像シーンとして「サブシーン（Ａ）」が撮像範囲対象として選択されている。選択された「サブシーン（Ａ）」のＰＴＺ値は図１２のように「パン設定値」が左側に３０度、「チルト設定値」が下方向に１０度、「ズーム倍率」が７倍という情報をネットワークカメラ１０１に送信し、撮像範囲（画角）を変更した結果、１３１０の画面イメージを取得する。
An example in which the number of persons in the screen image of 1309 does not change in the situation where the screen image of 1309 is being captured (the situation where the “whole scene” is captured) will be described with reference to the screen image of 1310. . According to the sixth line of the scene change condition table 1100, when the image is captured with the PTZ value of the “whole scene”, “if the“ number ”of“ main (scene) ”is“ unchanged ”for“ 15 seconds ”, Change the “scene” to “scene with a small number of shots” at “standard” speed ”. A screen image 1310 is an example in which, for example, “subscene (A)” is selected as a scene with a small number of shots by the processing in the sixth line. 1310, the imaging of the fourth row (the number of times of shooting is 0) having a small number of times of shooting (the number of times of shooting of the registered
また、サブシーンに変更する例として、撮像シーンに優先度を設定している場合の画面イメージの流れを説明する。 Also, as an example of changing to a subscene, a flow of a screen image in a case where a priority is set for an imaging scene will be described.
１３０９の画面イメージを撮像している状況（「全体シーン」を撮像している状況）で、１３０９の画面イメージ内の人数が変わらない場合の後の例を１３１１の画面イメージを参照して説明する。「全体シーン」のＰＴＺ値で撮像している場合、上述したようにシーン変更条件テーブル１１００の６行目の登録情報のように撮像シーンを変更する処理をネットワークカメラ１０１に行わせる。６行目の処理により優先度が設定されているサブシーンとして、たとえば「サブシーン（Ｂ）」を選択する場合の例が１３１１の画面イメージである。１３１１はたとえば、１３０９のように「全体シーン」が１５秒間以上続いたため、優先順が設定されているサブシーンの中（図１２の登録シーンの一覧データ１２００の優先度欄）の優先度が高い（優先度が１）の撮像シーンである「サブシーン（Ｂ）」が撮像範囲対象として選択される。選択された「サブシーン（Ｂ）」のＰＴＺ値は図１２のように「パン設定値」が右側に３０度、「チルト設定値」が下方向に１０度、「ズーム倍率」が７倍という情報をネットワークカメラ１０１に送信し、撮像範囲（画角）を変更した結果、１３１１の画面イメージを取得する。
An example in which the number of people in the screen image of 1309 does not change in the situation where the screen image of 1309 is being captured (the situation where the “whole scene” is being captured) will be described with reference to the screen image of 1311. . When the image is captured with the PTZ value of the “entire scene”, the
これらの取得した画面イメージをネットワークカメラ１０１で録画し、動画像保存サーバ１０３、もしくはネットワークカメラ１０１自身に記憶する。
These acquired screen images are recorded by the
以上の処理により、１台のネットワークカメラによって撮像された撮像画像から、被写体である人物の顔の表情と、人物の所作や服装なども動的に変更して撮像が可能となり、ユーザの事前の設定した撮像範囲（シーン）の変更条件などにより、動的に撮像シーンを変更することができる。 With the above processing, from the captured image captured by one network camera, the facial expression of the person who is the subject and the behavior and clothes of the person can be dynamically changed and imaged. The imaging scene can be dynamically changed according to the set imaging range (scene) change condition and the like.
別の実施例として、音声の認識によるシーン変更条件の例を図１１を参照して説明する。 As another embodiment, an example of a scene change condition by voice recognition will be described with reference to FIG.
自動撮影中に、たとえば、「入場です」などの音声をネットワークカメラ１０１のマイク３１０が取得した場合、シーン変更条件テーブル１１００の８行目の登録情報のように撮像シーンを変更する処理をネットワークカメラ１０１に行わせる。たとえば、「音声」の「認識」が「入場です」の場合、「シーン」を「標準」の速さで「サブシーン（入場）」に変更する処理を行う。選択された「サブシーン（入場）」のＰＴＺ値は、図１２の３行目のように「パン設定値」が右側に４０度、「チルト設定値」が下方向に５度、「ズーム倍率」が４倍という情報をネットワークカメラ１０１に送信し、撮像範囲（画角）を変更する。
For example, when the
以上の処理により、音声認識によってもシーン変更を変更可能に設定することができ、ユーザの所望の撮像範囲（シーン）を適切に設定することができる。 Through the above processing, the scene change can be set to be changeable also by voice recognition, and the user's desired imaging range (scene) can be appropriately set.
本発明は、例えば、システム、装置、方法、プログラムもしくは記録媒体等としての実施態様をとることが可能である。具体的には、複数の機器から構成されるシステムに適用しても良いし、また、一つの機器からなる装置に適用しても良い。 The present invention can take embodiments as a system, an apparatus, a method, a program, a recording medium, or the like. Specifically, the present invention may be applied to a system including a plurality of devices, or may be applied to an apparatus including a single device.
また、本発明におけるプログラムは、図示したフローチャートの処理方法をコンピュータが実行可能なプログラムであり、本発明の記憶媒体は当該処理方法をコンピュータが実行可能なプログラムが記憶されている。なお、本発明におけるプログラムは各装置の処理方法ごとのプログラムであってもよい。 Further, the program according to the present invention is a program capable of executing the processing method of the illustrated flowchart by a computer, and the storage medium of the present invention stores a program capable of executing the processing method by a computer. The program according to the present invention may be a program for each processing method of each device.
以上のように、前述した実施形態の機能を実現するプログラムを記録した記録媒体を、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ（またはＣＰＵやＭＰＵ）が記録媒体に格納されたプログラムを読み出し、実行することによっても本発明の目的が達成されることは言うまでもない。 As described above, the recording medium storing the program for realizing the functions of the above-described embodiments is supplied to the system or the apparatus, and the computer (or CPU or MPU) of the system or the apparatus executes the program stored in the recording medium. Needless to say, the object of the present invention can be achieved by reading and executing.
この場合、記録媒体から読み出されたプログラム自体が本発明の新規な機能を実現することになり、そのプログラムを記録した記録媒体は本発明を構成することになる。 In this case, the program itself read from the recording medium implements the novel function of the present invention, and the recording medium on which the program is recorded constitutes the present invention.
プログラムを供給するための記録媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＤＶＤ−ＲＯＭ、磁気テープ、不揮発性のメモリカード、ＲＯＭ、ＥＥＰＲＯＭ、シリコンディスク等を用いることが出来る。 Examples of a recording medium for supplying the program include a flexible disk, a hard disk, an optical disk, a magneto-optical disk, a CD-ROM, a CD-R, a DVD-ROM, a magnetic tape, a nonvolatile memory card, a ROM, an EEPROM, and a silicon. A disk or the like can be used.
また、コンピュータが読み出したプログラムを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムの指示に基づき、コンピュータ上で稼働しているＯＳ（オペレーティングシステム）等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。 When the computer executes the read program, not only the functions of the above-described embodiments are realized, but also an OS (operating system) running on the computer based on the instructions of the program. It goes without saying that a case where some or all of the processing is performed and the functions of the above-described embodiments are realized by the processing is also included.
さらに、記録媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵ等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。 Further, after the program read from the recording medium is written into the memory provided in the function expansion board inserted into the computer or the function expansion unit connected to the computer, the function expansion board is executed based on the instruction of the program code. It goes without saying that a CPU or the like provided in the function expansion unit performs part or all of the actual processing, and the processing realizes the functions of the above-described embodiments.
また、本発明は、複数の機器から構成されるシステムに適用しても、ひとつの機器から成る装置に適用しても良い。また、本発明は、システムあるいは装置にプログラムを供給することによって達成される場合にも適応できることは言うまでもない。この場合、本発明を達成するためのプログラムを格納した記録媒体を該システムあるいは装置に読み出すことによって、そのシステムあるいは装置が、本発明の効果を享受することが可能となる。 Further, the present invention may be applied to a system constituted by a plurality of devices or to an apparatus constituted by a single device. Needless to say, the present invention can be applied to a case where the present invention is achieved by supplying a program to a system or an apparatus. In this case, by reading the recording medium storing the program for achieving the present invention into the system or the apparatus, the system or the apparatus can enjoy the effects of the present invention.
さらに、本発明を達成するためのプログラムをネットワーク上のサーバ、データベース等から通信プログラムによりダウンロードして読み出すことによって、そのシステムあるいは装置が、本発明の効果を享受することが可能となる。なお、上述した各実施形態およびその変形例を組み合わせた構成も全て本発明に含まれるものである。 Further, by downloading and reading out a program for achieving the present invention from a server, a database, or the like on a network by using a communication program, the system or device can enjoy the effects of the present invention. It should be noted that the present invention includes all configurations obtained by combining the above-described embodiments and their modifications.
１０１ ネットワークカメラ
１０２ 携帯端末
１０３ 動画像保存サーバ
Claims (10)
前記撮像部により撮像される撮像画像により解析されるデータが所定の条件を満たすか判断する条件判断手段と、
前記条件判断手段により所定の条件を満たすと判断された際に、撮像部の撮像条件を所定の撮像条件に変更する設定値を記憶する設定値記憶手段と、
前記条件判断手段により所定の条件を満たすと判断された場合、撮像部の撮像条件を前記設定値記憶手段に記憶された設定値に変更する情報として送信する撮像条件送信手段と、
前記撮像条件送信手段により撮像条件を変更した撮像部の撮像画像を表示する表示手段と
を有することを特徴とする情報処理装置。 An information processing apparatus that transmits an imaging condition to an imaging unit,
Condition determining means for determining whether data analyzed by a captured image captured by the imaging unit satisfies a predetermined condition,
A setting value storage unit configured to store a set value for changing an imaging condition of the imaging unit to the predetermined imaging condition when it is determined that the predetermined condition is satisfied by the condition determination unit;
An imaging condition transmitting unit that transmits, as information for changing an imaging condition of an imaging unit to a set value stored in the set value storage unit, when it is determined that the predetermined condition is satisfied by the condition determination unit;
An information processing apparatus comprising: a display unit that displays a captured image of an imaging unit whose imaging condition has been changed by the imaging condition transmitting unit.
前記設定値記憶手段は、パン機能、チルト機能、及びズーム機能の設定値を記憶すること
を特徴とする請求項１に記載の情報処理装置。 The imaging unit includes a pan function, a tilt function, and a zoom function, and the captured image is an image corresponding to a range that can be captured by a pan function, a tilt function, and a zoom function,
2. The information processing apparatus according to claim 1, wherein the setting value storage unit stores setting values of a pan function, a tilt function, and a zoom function.
前記条件判断手段の所定の条件を記憶する条件記憶手段と
を有することを特徴とする請求項１乃至４に記載の情報処理装置。 Input receiving means for receiving an input of a predetermined condition of the condition determining means from a user,
The information processing apparatus according to claim 1, further comprising a condition storage unit configured to store a predetermined condition of the condition determination unit.
を有することを特徴とする請求項１乃至７に記載の情報処理装置。 The information processing apparatus according to claim 1, further comprising a recording instruction unit configured to instruct the imaging unit or the communicable information processing apparatus to record a captured image captured by the imaging unit.
前記撮像部により撮像される撮像画像により解析されるデータが所定の条件を満たすか判断する条件判断ステップと、
前記条件判断ステップにより所定の条件を満たすと判断された際に、撮像部の撮像条件を所定の撮像条件に変更する設定値を登録する設定値登録ステップと、
前記条件判断ステップにより所定の条件を満たすと判断された場合、撮像部の撮像条件を前記設定値登録ステップで登録された設定値に変更する情報として送信する撮像条件送信ステップと、
前記撮像条件送信ステップにより撮像条件を変更した撮像部の撮像画像を表示する表示制御ステップと
を有することを特徴とする制御方法。 A control method for controlling an information processing device that transmits an imaging condition to an imaging unit,
A condition determination step of determining whether data analyzed by a captured image captured by the imaging unit satisfies a predetermined condition,
A setting value registration step of registering a setting value for changing an imaging condition of the imaging unit to the predetermined imaging condition when it is determined that the predetermined condition is satisfied by the condition determination step;
An imaging condition transmitting step of transmitting, as information for changing an imaging condition of the imaging unit to the set value registered in the set value registration step, when it is determined that the predetermined condition is satisfied by the condition determining step,
A display control step of displaying a picked-up image of the image pickup unit whose image pickup condition has been changed by the image pickup condition transmitting step.
前記撮像部により撮像される撮像画像により解析されるデータが所定の条件を満たすか判断する条件判断手段と、
前記条件判断手段により所定の条件を満たすと判断された際に、撮像部の撮像条件を所定の撮像条件に変更する設定値を記憶させる設定値記憶手段と、
前記条件判断手段により所定の条件を満たすと判断された場合、撮像部の撮像条件を前記設定値記憶手段に記憶された設定値に変更する情報として送信する撮像条件送信手段と、
前記撮像条件送信手段により撮像条件を変更した撮像部の撮像画像を表示する表示手段
として機能させるためのプログラム。
An information processing device that transmits an imaging condition to the imaging unit,
Condition determining means for determining whether data analyzed by a captured image captured by the imaging unit satisfies a predetermined condition,
A setting value storage unit configured to store a setting value for changing an imaging condition of the imaging unit to the predetermined imaging condition when it is determined that the predetermined condition is satisfied by the condition determination unit;
An imaging condition transmitting unit that transmits, as information for changing an imaging condition of an imaging unit to a set value stored in the set value storage unit, when it is determined that the predetermined condition is satisfied by the condition determination unit;
A program for functioning as a display unit that displays a captured image of an imaging unit whose imaging conditions have been changed by the imaging condition transmitting unit.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018186376A JP2020057901A (en) | 2018-10-01 | 2018-10-01 | Information processing apparatus, control method thereof, and program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018186376A JP2020057901A (en) | 2018-10-01 | 2018-10-01 | Information processing apparatus, control method thereof, and program |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2020057901A true JP2020057901A (en) | 2020-04-09 |
Family
ID=70107912
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2018186376A Pending JP2020057901A (en) | 2018-10-01 | 2018-10-01 | Information processing apparatus, control method thereof, and program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2020057901A (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115314630A (en) * | 2022-01-24 | 2022-11-08 | 李宁 | Intelligent regulating and controlling management system for wedding photo shooting and camera shooting based on image recognition and analysis technology |
-
2018
- 2018-10-01 JP JP2018186376A patent/JP2020057901A/en active Pending
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115314630A (en) * | 2022-01-24 | 2022-11-08 | 李宁 | Intelligent regulating and controlling management system for wedding photo shooting and camera shooting based on image recognition and analysis technology |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11696021B2 (en) | Video recording device and camera function control program | |
| US9013604B2 (en) | Video summary including a particular person | |
| US8665345B2 (en) | Video summary including a feature of interest | |
| US10447874B2 (en) | Display control device and display control method for automatic display of an image | |
| JP5967473B2 (en) | Imaging apparatus and imaging system | |
| JP5991514B2 (en) | Imaging apparatus and imaging system | |
| WO2017092128A1 (en) | Method and device for displaying preview image | |
| JP2013013063A (en) | Imaging apparatus and imaging system | |
| JP5837922B2 (en) | Ranking key video frames based on camera position | |
| US9143682B2 (en) | Image capturing apparatus, method, and recording medium capable of continuously capturing object | |
| JP4992215B2 (en) | Imaging apparatus and program | |
| US9374525B2 (en) | Shooting apparatus and shooting method | |
| JP2020057901A (en) | Information processing apparatus, control method thereof, and program | |
| US20190198058A1 (en) | Image recording control apparatus, image recording method, recording medium storing image recording program, image pickup apparatus, and image recording control system | |
| US11595565B2 (en) | Image capturing apparatus, method for controlling the same, and recording medium for automatic image capturing of a subject | |
| US20230345107A1 (en) | Imaging apparatus, information processing apparatus, information processing method, and program | |
| WO2023062911A1 (en) | Electronic apparatus, control method, program, and storage medium | |
| JP2012129854A (en) | Imaging apparatus and program | |
| WO2020066316A1 (en) | Photographing apparatus, photographing method, and program | |
| JP6824061B2 (en) | Imaging apparatus, control methods, programs, and storage media executed by the imaging apparatus. | |
| JP2017135477A (en) | Image managing device, image reproducing device, method for controlling the same, system, program, and storage medium | |
| JP2015036748A (en) | Imaging device, method and program for controlling imaging device | |
| JP2012134835A (en) | Imaging apparatus, control method of the same, and program | |
| JP2017011710A (en) | Imaging apparatus and imaging system | |
| JP2016032242A (en) | Imaging apparatus, imaging control method and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20181031 |
|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190115 |